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第 1 章 辨识 的 基本 概念 


在 社会 和 生产 中 , 越 来 越 多 需要 辨识 过 程 (或 系统 ) 模 型 的 问题 已 广 这 引起 人 
们 的 重视 ,社会 科学 和 自然 科学 的 各 个 领域 有 很 多 字 者 在 研究 有 关 线 性 和 非 线性 
的 辩 识 问题 。 对 于 线性 系统 的 模型 辨识 和 参数 估计 , 早 在 20 世纪 60 年 代 初 期 ， 
Zadeh 就 给 出 了 系统 辨识 的 定义 ,人 们 已 经 进行 了 深信 的 研究 ,并 总 结 出 一 套 成 部 
的 方法 :最 小 二 乘 辩 识 方 法 .最 大 似 然 辨识 方法 ,梯度 法 辨识 等 等 。 这 些 理论 和 方 
法 已 在 工程 实际 中 得 到 了 广泛 的 应 用 。 然 而 在 现实 中 , 非 线性 是 普 饥 存在 的 ,而 线 
性 模型 只 是 对 非 线性 的 一 种 简化 和 近似 。 对 非 线性 系统 的 研究 .设计 要 比 线性 系 
统 复杂 得 多 。 且 方法 并 非 惟一 ,更 找 不 到 统一 的 设计 模式 。 只 能 是 针对 具体 问题 
分 析 其 非 线性 的 问题 所 在 , 抓 住 其 影响 系统 静 .动态 品质 的 要 害 , 研 究 辩 识 非 线 性 
系统 模型 及 控制 的 理论 和 方法 ,进而 对 系统 进行 辨识 .补偿 或 控制 。 若 能 够 通过 辨 
识 得 到 其 较 准 确 的 横 型 , 则 是 控制 问题 的 关键 。 本 章 主要 介绍 系统 辨识 的 基本 概 
念 :1.1 节 系统 和 模型 ,其 中 包括 模型 的 表现 形式 久 数 学 模型 的 分 类 :1 .2 节 闪 识 的 
定义 ;1.3 节 辨识 问题 的 表示 形式 及 原理 ,其 中 包括 辨识 问题 的 表达 形式 、 办 识 算 
法 的 基本 原理 和 误差 准则 ;1.4 节 辩 识 的 内 容 和 步骤 ;1.5 节 介绍 典型 的 非 线性 系 
统 辩 识 与 控制 方法 。 





1.1 系统 和 模型 
1.1.1 模型 的 表现 形式 


系统 是 通过 模型 来 表达 的 ,因此 系统 辨识 也 称 为 模型 辨识 。 模 型 有 如 下 一 些 
表现 形式 ; 

(1)“ 直 党 "模型 。 它 指 过 程 的 特性 以 非 解析 的 形式 直接 储存 在 人 脑 中 , 靠 人 
的 直觉 控制 过 程 的 进行 。 例 如 ,司机 就 是 辜 “ 直 觉 模 型 "来 控制 汽车 的 方向 盘 。 

(2) 物理 模型 。 亡 是 根据 相似 原理 把 时 和 间 过 程 加 以 缩小 的 复制 品 , 或 是 实际 
过 程 的 -- 种 物理 模拟 。 比 如 :电力 系统 动态 模型 . 某 种 控制 机 床 模 型 或 风 洞 ,水 利 
学 模型 , 传 热 学 模型 等 均 是 物理 模型 。 

(3) 图 表 模型 。 它 以 图 形 或 表格 的 形式 来 表现 过 程 的 特性 。 如 阶 跃 啊 应 、 脉 
冲 响 应 和 频率 响应 等 ,也 称 非 参数 模型 。 

(4》 数学 模型 。 它 用 数学 结构 的 形式 来 反映 实际 过 程 的 行为 特性 。 和 帝 用 的 有 
代数 方程 ,微分 方程 .差分 方程 和 状态 方程 。 


-2 系统 办 识 及 其 MIATLAB 仿真 


a, 经 济 学 于 的 Cobb-Dougjas 产生 关系 模型 (代数 方程 ) 
YY = 4TL2K2，alDDOi ao 所 1 《1 .1) 
式 中 ,Y 为 产值 ;L 为 劳动 力 ; 并 为 资本 。 
,微分 方程 
十 古 1 受 全 是 人) 十 区 at 二 ZE) 二 zf 
一 太 CT 人 E) 十 OeCt)+ett) 《1.2) 
式 中 ,afti 和 xf) 为 输 人 输出 时 ;ez) 为 噪声 项 。 
c. 郑 分 方程 
岂 (z(R) 一 吾 (z 人) 二 ef) {T.3) 
式 中 
总 (zi 一 +ale 1 + 2 二 、 
Bfz-1)= 站 过 1 十 而 2 十 2 (4 
即 
z(A) 一 alz( 上 一 1) 十 Gaz( 下 一 2 十 十 Gr2( 下 一 Pa 


玉 (下 一 1 寺村 让 (一 72) 十 (天 (1.5) 


式 中 ,xf 和 = 人) 为 输 人 输出 量 ;e() 为 噪声 项 ; zx -1! 表 示 延 迟 算 子 . 即 = 7() 
= (1)。 


d. 状态 方程 
于 (= 帮 TE 二 ti 十 下 of 0 6 
&f 人 一 et) CE 
或 
区 (下 十 1 一 六 开 ) 十 百 E( 开 ) 十 开 o( 开 ) (1.7) 


天 一 CR)》 十 站 二 ] 
式 中 ,xf 和 zf) 为 输 人 输出 量 ;jz 人) 为 状态 变量 io) 和 吧 () 为 嗓 声 项 。 





线性 
德 员 确定 性 
动态 
央 观 
目 线 性 
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1.1.2 数学 模型 的 分 类 


-- 般 来 说 ,系统 的 特性 有 线性 与 非 线性 .动态 与 静态 .确定 性 与 随机 性 .宏观 与 
微观 之 分 , 故 措 述 系 统 特性 的 数学 模型 必然 也 有 这 几 种 类 型 的 区 分 。 这 些 类 型 的 
数学 模型 可 以 用 蜀 1.1 来 表示 。 另 外 ,也 有 参数 模型 和 非 参 数 横 型 ; 外 部 模型 
《SISO 系统 ) 和 内 部 模型 (MIMO 系统 ) 等 不 同 分 类 。 


1.2 办 识 建 模 的 定义 


系统 模型 建立 ( 建 模 ) 分 为 机 理 建 模 .系统 辨识 建 模 .机 理 分 析 和 系统 办 识 相 结 
合 的 建 模 方法 。 呈 机 理 建 模 是 一 种 常用 的 建 模 方法 ,是 根据 系统 的 结构 ,分 析 条 统 
运动 的 规律 ,利用 已 知 的 相应 的 定律 .定理 或 原理 , 如 化 学 动力 学 原理 .生物 学 定 
律 .牛顿 定理 ,能量 平衡 方程 和 传 热 传 质 原 理 等 推导 出 描述 系统 的 数学 模型 ,建立 
的 模型 可 能 是 线性 的 或 非 线 几 的 ,这 类 建 模 有 时 也 称 为 白 箱 建 模 。 凶 系统 辨识 是 
一 种 利用 系统 的 输 和 输出 数据 建 模 的 方法 ,是 顺 箱 建 模 问 题 ,即使 对 系统 的 结构 和 
参数 一 无 所 知 ,也 可 以 通过 多 次 测量 得 到 的 系统 的 输入 和 输出 的 数据 来 求 得 系统 
的 模型 ,是 对 实际 系统 的 一 个 人 台 适 的 近似 。 在 这 方面 线性 系统 的 建 模 (辨识 ) 理 论 
已 成 熟 , 有 关 学 科 的 专业 知识 茧 求 不 变 ,获得 的 模型 较 简 单 。 包 机 理 建 模 和 辨识 建 
模 结合 的 方法 适用 于 系统 的 运动 机 理 不 是 完全 未 知 的 情况 , 称 之 为 黄色 建 模 。 利 
用 已 如 的 运动 机 理 和 经 验 确 定 系 统 的 结构 和 参数 ( 即 确 定 模型 )。 

辨识 间 题 包括 模型 结构 辨识 和 参数 估计 。 所 谓 参 数 估计 或 点 估计 问题 , 即 设 
z 为 一 未 知 和 参数 ,可 以 视 为 参数 空间 X 中 的 一 个 点 ,测量 ?是 一 随机 间 量 ,其 分 量 
依赖 于 参数 =。 即 根据 # 的 一 组 样本 (观测 值 对 参数 zx 的 佑 计 就 称 为 参数 估计 
问题 。 而 系统 辨识 是 研究 如 何 获得 必要 的 系统 输 人 输出 的 数据 { 样 本 ) ,以 及 如 何 
从 所 获得 的 数据 构造 一 个 相对 真实 地 反映 客观 对 象 的 数学 借 型 。1.A. Zadeh 在 
1962 年 曾 给 系统 辩 识 下 过 一 个 定 多 ; 

定义 1.1 辨识 就 是 在 输入 和 输出 的 基础 上 由 规定 的 一 类 系统 模型 中 确定 一 
个 系统 模型 ,使 之 与 被 测 系统 等 价 。 

这 个 定义 明确 了 辨识 的 三 大 要 素 : 系 统 的 输入 输出 数据 .模型 类 和 等 价 准则 。 
这 个 定义 中 提 到 的 "一 类 系统 模型 "是 指 规定 的 连续 时 间 模 型 或 离散 竺 间 模型 . 葵 
人 输出 模型 或 状态 空间 模型 ,确定 性 模型 或 随机 模 了 来 、 线 人 性 模型 或 非 线性 模型 等 。 
模型 类 的 规定 是 根据 人 们 对 实际 系统 的 了 解 以 及 建立 模型 的 目的 设 定 的 。 规 定 了 
模型 类 后 ,再 周 输 人 输出 数据 按 结 构 辩 识 的 方法 确定 系统 的 结构 参数 ,并且 用 参数 
办 识 的 方法 办 识 系统 的 参数 。 

根据 定义 ,我 们 所 建立 的 模型 必须 与 被 测 系统 在 某 种 意义 上 是 等 价 的 。 
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设 M 表示 被 测 系统 的 一 个 样 型 ,并 且 满 足 
ME CGn 《1.8) 
G, 是 具有 某 种 属性 的 模型 类 。 一 个 系统 可 看 做 是 从 系统 允许 的 输 和 人 空间 L 到 输 
出 空间 了 的 一 个 算 子 训 ( 相 当 于 对 象 M)] ,b 属于 某 个 算 子 类 避 。 系 统 辩 识 的 问题 
是 指 对 于 一 个 给 定 的 算 子 类 G 和 一 个 对 象 训 EC 确定 一 个 模型 类 Co。 及 它 的 一 
个 元 素 思 ECG 可 以 认为 Gv 是 加 的 一 个 子 集 ) ,使 得 加 尽 可 能 的 通 近 疡 。 在 实 
际 的 被 控 款 统 中 ,可 以 采集 到 对 象 的 输 和 人 和 输出 的 数据 , 现 认 为 时 间 函 数 us 人)， 
ytEt0,T] 所 表示 的 输入 ,输出 对 可 以 定义 这 个 系统 ,这 时 汰 识 的 目标 是 确 
定 pu ,并 有 卫 满 足 
由 下 = 一 捉 oa 委 seEDe>0 (1.9) 
模型 不 确定 的 非 线性 系统 的 辨识 应 属于 黑箱 辨识 问题 。 对 于 黑箱 辩 识 方法 ,被 测 
对 象 脾 属 的 算 子 是 未 知 的 ,由 于 输入 .输出 对 隐 含 地 表示 算 子 关 , 但 通常 可 认为 记 
属于 非 线性 连续 竺 子 集合 ,因此 可 选用 对 连续 等 子 集合 具有 任意 通 近 能 力 的 模型 
集合 。 对 模型 集合 的 选择 主要 考虑 算法 的 简单 性 ,模型 的 适应 能 力 和 逼近 的 精度 
等 因素 。 对 于 离散 时 间 系 统 , 这 样 的 集合 有 基于 多 项 式 的 NARMA 模型 ,而 基于 
神经 网 络 所 构成 的 模型 也 属 其 中 的 一 种 。 黑 箱 法 由 如 下 三 个 纱 豫 组 成 :实验 观测 
数学 建 模 、 模 型 验证 。 


1.3 天 识 问题 的 表示 形式 及 原理 
1.3.1 办 识 问题 的 吕 达 形 式 


下 面 着 重 讨论 线性 离散 模型 的 辨识 问题 。 所 谓 线性 离散 模型 是 指 一 个 或 几 个 
变量 可 以 表示 的 另外 一 些 变 量 在 时 间或 空间 的 离散 点 上 的 线性 组 人 台 , 如 图 1.2 所 
示 。 


三 各 





图 1.2 ”线性 离散 模型 的 茹 学 表达 形式 


图 中 ,天 (&) 和 (是 模型 的 输入 输出 变量 ,它们 在 离散 点 上 必须 是 可 观测 
的 :e( 天 ) 是 模型 嗓 声 ;8 是 未 知 异 型 参数 。 记 
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和 一 [下 区 于) ,下 区 更) ， 丙 3( 下) ， 丙 坟 二》 ] 了 
【1 .10) 
自 二 [92 
由 线性 离散 模型 的 输出 可 表示 成 
z(E) = 六 bji(E) + e(R) = TCR)8+e(A) (1.11) 
例 1.1 将 差分 方程 化 成 最 小 二 乘 格 式 。 
考虑 如 下 差分 方程 
2 十 站 1] 各 ( 玫 一 1 十 号 22( 直 一 2 十 十 匡 人 下 一 天 
(1.12) 


一 有 HR 二 1) 十 二) 
式 中 ,方程 的 输入 输出 变量 af) .=z( 在 各 离散 点 上 都 是 可 观测 的 。 
解 ” 设 样本 及 参数 集 为 
大 (下 一 | 一 区 一 1) 一 ( 虹 一 2 一 1)， 
| 2 一 2 下 一) 工 【1.13) 
上 自 = [alye2yan 1 总] 
则 丰 () 是 可 观测 的 向 量 , 那 么 差分 方程 所 对 应 的 最 小 二 乘 格 式 为 
zf ) 一 帮 区 CR) 十 ef 下] (it.14》 
如 果 图 1.3 是 被 辨识 的 系统 , 则 描述 它 的 模型 必须 是 能 化 成 图 1.4 所 示 的 拓 
识 表 达 形 式 , 即 最 小 二 滋 格 式 ,输出 量 = (&) 应 是 输入 量 正人 ) 的 线性 组 合 ,如 式 
[1.14)。 





图 1.4 辩 识 问题 的 表达 形式 
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1.3.2 辨识 算法 的 基本 原理 


辨识 的 目的 就 是 根据 系统 的 测量 信息 ,在 某 种 准则 意义 下 ,估计 出 模型 的 来 知 
参数 ,其 基本 原理 如 图 1.35 所 示 。 














图 1.5 辩 识 原理 


为 了 得 到 模型 参数 9 的 估计 值 ,通常 采用 逐步 逼近 的 办 法 。 在 上 时 刻 , 根 据 
前 一 时 刻 的 估计 参数 计算 出 模型 该 时 刻 的 输出 , 即 系统 输出 预报 什 


这 ( 开 ) 一 下 1 和 (一 1) (E.15) 
同时 计算 出 预报 误差 ,或 称 新 息 (innovation) 
全 【 开 )》 一 相形 ) 一 立 (] 1.3167 
图 中 ,系统 输出 量 
zfR) 一 下)B( 一 1)+ef) .17) 


有 闪 识 表 达 式 的 输 人 量 呈 04) 都 是 可 测量 的 。 然 后 将 预报 误差 * (&) 反 局 到 辩 识 
算法 中 ,在 某 种 准则 下 计算 出 上 时刻 的 模型 参数 估计 值 好 (人 ) ,并 据 此 更 新 模型 参 
数 。 这 样 依次 迁 代 下 去 ,直至 其 准则 示 数 达到 最 小 值 。 此 刻 模 型 的 输出 () 便 可 
以 在 该 谁 则 意 闵 下 最 好 的 通 近 系统 的 短 出 =() ,从 而 获得 了 所 需 刘 的 模型 ， 
上 述 辨识 算法 原理 可 以 推广 到 密 输 出 系统 。 如 果 系 统 的 输出 是 头 维 向 量 , 那 
么 辩 识 问题 的 表达 形式 应 为 
垃 (R) 一 下 (天 ) 和 十 臣 (人 ) 《1.18) 


式 中 ,输出 向 量 为 
&( 开 ) 一 [si( 天 )，s2( 天 )》 sme 到)] (1.19) 
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噪声 癌 量 为 
BC) 二 「e1(R] ea 天 em (二 ) 【] .20) 
参数 庙 量 为 
上 二 00 《1.21) 
输入 数据 阵 为 
1 天 ) 页 12 现 ) 机 疡 1 ) 
于 (RE) = 本 (22) 
全 下 二 


该 多 输出 情况 于 的 办 识 问题 与 单 输出 情 珊 下 的 辨识 问题 相同 ,其 辩 识 原理 如 
图 1.6 所 示 。 

















图 1.,6 多 糖 册 过 程 的 辨识 原 埋 


1.3.3 误差 准则 

等 价 准 则 是 辩 识 问题 中 不 可 能 少 的 三 大 要 素 之 一 , 它 是 用 来 衡量 模型 接近 实 
际 过 程 的 准则 ,而 县 它 通常 被 表示 为 一 个 误差 的 泛 图 。 因 王 等 价 准 则 也 叫 慌 误 差 
准则 或 损失 函数 ,也 称 淮 则 画 数 , 记 作 


J6) = 之 ， Fe(R)) (1.23) 
式 中 , A) 是 st) 的 函数 。 用 得 最 多 的 是 平方 一 数 , 即 
Fe(R)) = ER) 【1.24) 


se(&) 是 定义 在 区 间 (0, 世 ) 上 的 误 善 函 数 。 这 个 误差 函数 应 该 广义 地 理解 为 模型 与 
实 奈 过 程 的 "误差 ,也 可 以 是 输出 误 善 .输入 记 善 或 三叉 全 差 ,如 图 1.7 所 示 。 
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图 1.7 误差 准则 分 类 


从 图 1.7 可 知 ,将 系统 的 输出 和 毁 型 的 输出 的 盖 定 义 的 误差 称 为 输出 误差 ;将 
系统 的 和 输 人 和 逆 模 型 的 输出 的 益 定 义 的 误差 称 为 输 人 误 关 ; 而 从 系统 广义 模型 j6 
定义 的 误差 称 作 广 义 误差 。 输 出 误差 在 辨识 中 是 应 用 最 广泛 的 一 种 误差 准则 ,如 
图 1.7(a) 所 示 。 当 实际 系统 和 模型 的 输出 分 别 记 作 = (*) 和 zf 人 时, 则 

ef 有 ) 一 zz() 一 za(R) 一 2) 一 [ee 下) 【1.25) 
称 作 输出 误差 。 式 中 ,zf[x(g)] 是 当 输 人 为 z(E) 时 的 模型 输出 。 如 果 扰 动 是 作 
用 在 过 程 输出 端的 白 蝶 声 ,那么 选用 这 种 误差 准则 就 是 理所当然 的 了 。 但 是 ,输出 
误差 s(&) 通 常 是 磺 型 参数 的 非 线 性 函数 ,因此 在 这 种 误差 准则 意义 下 , 辩 识 问题 
将 归结 成 复杂 的 非 线性 最 优化 问题 。 比 如 ,如 果 图 1.7(a) 中 的 模型 取 脉 冲 传递 函 
数 形式 
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.CUz-1) 二 也 (z ) 
piG(z ) 二 AKC 人 (1.26) 
式 中 
As = 1+ae tn 
1 十 4 127) 
则 输出 误差 为 
_ 3(z) 
efR) 一 交 ( 大 ) CT 人 人) 【1.28) 
且 误 差 准 则 为 
.人 三 了 包 ( 丙 ) 一 BCz ) re) | 29】 
记 ; 冲 (s 1 


显然 ,误差 叭 由 函数 乒 人 关于 模型 参数 空间 是 非 线性 的 。 由 于 在 确定 这 种 情况 的 
最 优 解 时 ,需要 用 梯度 法 ,和 牛顿 法 或 共 朱 梯 度 法 等 夺 代 的 最 优化 算法 ,这 就 使 得 状 
识 算法 变 得 比较 复 傈 。 在 实际 应 用 中 是 否 采 用 这 种 误差 准则 要 视 具体 情况 而 定 。 


1.4 办 识 的 内 容 和 步骤 


拓 识 问题 分 为 模型 结构 辨识 和 参数 辨识 \ 或 估计 )。 当 系统 模型 结构 根据 工程 
经 验 或 采用 模型 结构 的 辨识 确定 后 ,主要 的 问题 是 模型 的 参数 估计 。 从 以 上 分 析 
可 见 , 系 统 辩 识 主 要 包括 以 下 内 容 和 步骤 : 


1. 设法 取得 系统 输入 输出 的 观测 数据 


为 了 获得 一 个 最 大 可 能 接近 实际 对 象 特性 的 数学 模型 ,在 条 件 许可 的 情况 下 ， 
要 进行 辨识 实验 。 我 们 希望 由 辨识 实验 所 获得 的 系统 输 和 输出 数据 尽 可 能 多 地 包 
揪 对 象 的 信息 。 辨 识 实验 设计 包括 : 

1) 设计 准则 

为 了 对 不 同 的 试验 方案 进行 比较 ,必须 给 出 一 个 度量 试验 优 劣 性 的 准则 。 比 
如 参数 估计 的 精度 ,参数 估计 量 一 般 是 一 个 随机 变量 或 随机 向 量 , 其 估计 的 精度 可 
以 用 -个 估 汁 误差 的 方差 或 协 方差 阵 来 稀 量 。 数 理 统计 中 有 下 面 的 重要 结论 :对 


于 一 次 完成 的 采样 ,参数 估计 的 全 的 协 方 差 氏 足 frarmer-Rao 不 等 式 
covr| 站 ,有 六 MD (1.30) 


式 中 ,MI 为 Fisher 信息 图 数 斌 阵 ， 
| [amnpkz | 日 ] [ee 
j 有 | 








1.31) 
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式 中 ,z 表示 测量 数据 列 :np(z|g8) 表 示 给 定 参 数 8 时 希望 x 的 条 件 概率 密度 的 
自然 对 数 。 根 据 式 (1.30) ,希望 Ma 尽 可 能 的 小 ,使 得 参数 估计 的 精度 有 可 能 担 
高 ;又 根据 式 (1.31), Ms 又 依赖 于 测 重 数据 ,所 以 Me 依赖 于 测量 数据 xz， 因为 
Me 是 一 个 方 阵 ,度量 的 准则 一 般 应 为 标量 函数 。 在 实验 中 ,通常 取 
了 一 -~ lndetwfy 《 卫 .32) 

作为 设计 准则 。 因 为 测量 数据 { 包 括 所 有 的 输 人 和 人 输出) 与 输入 人们 号 的 选择 有 关 , 我 
们 将 推出 各 种 关系 的 表达 式 ,并 据 此 设计 出 最 优 输 入 信号 。 

2) 持续 激励 输 和 人 信和 号 的 设计 

用 于 辨识 模型 的 输入 信和 叶 通 帝 要 求 是 零 殉 值 的 伪 随 机 傅 导 。 无 论 采 用 何 种 仿 
号 ,都 要 求 信号 是 持续 激励 的 。 

3) 采样 间 阳 的 设计 

在 实验 之 前 必须 适当 地 选择 采样 间隔 或 输 人 信和 号 的 愉 序 脉冲 宽度 ,其 主要 依 
据 是 实际 系统 的 采样 间隔 和 所 要 求 的 模型 精度 。 采 样 间 隔 4 人 人 ,会 影响 辨识 精 
度 。 和 否则 会 增加 存储 量 和 计算 量 。 一 个 经 验 的 规则 是 











TvaAse5 一 15 (1.33) 
式 中 ,Te 是 系统 过 渡 过 程 时 间 的 9%5% :另外 一 规则 是 
六 (1.34) 
或 
和 二 (0.05 0. 了 《1.35) 


式 中 , Tu 是 对 象 的 最 小 时 间 常 数 , 世 为 系统 的 主要 时 间 常 数 : 
2. 应 有 一 信 合 适 的 寞 型 集 


为 了 所 辨识 的 系统 能 从 这 个 模型 集中 选择 出 一 合适 的 模型 ,模型 集 可 根据 机 
理 所 得 到 的 一 些 未 知 参 数 的 模型 结构 ,或 是 待定 参数 仅 作为 数据 拟 合 工具 的 黑箱 
模型 结构 ,也 可 以 是 根据 系统 实际 工艺 要 求 或 系统 预测 所 得到 的 一 组 符 拟 合 曲线 
数据 结构 。 


3, 必须 有 一 个 对 办 识 所 得 到 模型 的 验证 评价 


对 辨识 所 得 到 模型 的 验证 是 系统 辨识 的 重要 环节 。 验 证 的 目的 是 为 了 确定 该 
模型 是 否 是 模型 集中 针对 当前 观测 数据 的 最 佳 选择 。 验 证 的 方法 主要 有 

(1) 利用 先 验 知识 验 证 , 即 根据 对 系统 已 有 的 知识 来 判断 模型 是 否 实用 。 

(2》 利用 数据 检验 。 当 利用 一 组 数据 辩 识 得 到 一 个 模型 之 后 ,通常 希望 用 曙 
-一 组 未 参与 辨识 的 数据 检验 模型 的 适用 性 - 如 果 检 验 结果 失败 ,可 能 存 在 的 问题 
是 :辨识 所 用 的 一 组 数据 包含 的 信息 不 足 或 所 选 模型 类 不 合适 。 中 外 ,也 可 以 用 同 
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一 组 数据 对 不 同 模型 进行 比较 ,以 选用 更 合适 的 模型 。 

(3) 利用 实际 啊 应 检验 。 比 较 实 际 系 统 和 模型 的 阶 坚 啊 应 或 脉冲 响应 是 判别 
模型 是 否 适 用 的 重要 手段 。 

(4) 利用 届 励 售 导 1u(8ii 的 自 相 关 画 数 校 验 . 若 验证 ja 让 是 零 均 值 的 白 
噪声 序列 ,相应 的 模型 是 可 靠 的 ,其 置信 麻 为 中 %%。 


1.5 典型 的 非 线 性 系统 辨识 与 控制 方法 
1.5.1 ， 非 线性 鲜 识 典型 模型 及 辨识 .控制 方法 特点 


建立 描述 非 线性 现象 模型 是 研究 非 线性 阿 题 的 基础 ,Hiltiings 对 以 前 的 非 线 性 
系统 辨识 结果 做 了 一 次 总 结 性 的 综述 。Titterington 和 Akitsos 在 1989 年 也 做 了 
非 线 性 系统 辨识 的 综述 。 描 述 非 线 忻 系统 的 典型 模型 及 对 非 线 性 辨识 ,控制 的 方 
法 有 : 

1) Volterra 级 数 





Yolrerra 级 数 可 表示 为 
3 一 人)| | jzrtyreeyr) andr = > 国 ( 
= = = 


【1.36) 

函数 乒 (riyrar) 是 Volterra 级 数 的 核 (kernel)。Volterra 的 核 ! 特 别 是 频 域 
核 ) 有 明确 的 物理 意义 。 从 模型 辩 识 的 角度 看 Volterra 级 数 有 一 个 明显 的 缺点 , 即 
需要 相当 多 的 被 估计 参数 才能 取得 满意 的 精度 。 例 如 , 当 用 Volterra 级 数 去 通 近 
一 个 二 和 阶 的 非 线性 系统 需要 10" 个 参数 。Billings 对 这 个 模型 做 过 详细 的 研究 , 提 
出 子 凡 种 辨识 算法 ,尽管 Volterra 级 数 对 非 线性 系统 理论 .函数 通 近 .辨识 方法 的 
发 展 有 非常 重要 的 推动 作用 ,但 认为 它 很 难 用 过 程 建 模 。 

2) NARMAX 模型 子 集 

谢 菲 尔 德 大 学 的 专家 对 非 线性 的 辩 识 做 了 一 次 综述 ,他 认为 ,NARMAX 模型 

如 ( 才 ] 一 下 [所 是 一 1 一 杖 直下 一 十 (一 卫 
ef( 二 一 1)e( 开 一 训 十 e 站 )] 

式 中 F() 是 一 个 非 线性 函数 ,e(R) 是 一 个 不 可 观测 的 零 均 值 和 有 限 方差 的 独立 
噪声 ,法 =0,1,2,… 基 离散 时 间 标 量 。 近 年 来 ,Sonrag .Billings 和 Chen .Biliiings 和 
Zhu 又 找到 了 另 一 NARMAX 模型 子 集 , 称 为 有 理 (rationa) NARMAX 异型 ,其 表 
达 式 为 
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之 态 。( 开 )Gm 
十 世 ( 直 ) 三 二 十 马 ( 开 ) ( 工 ,371+ 


2 矶 (二 ) Gd 


NARMAX 模型 提供 了 一 个 统一 的 有 限 可 实现 非 线性 系统 表达 式 , 像 双 线 性 型 、 
Wiener 模型 .Armax 模型 等 ,其 优点 是 台 近 精度 高 , 收 伍 速度 快 ,对 线性 参数 的 子 
集 模 型 辨识 简便 。 可 以 用 线性 最 小 二 恨 法 进行 选项 和 个 计 和 参数。 在 国外 已 用 在 化 
工 领域 ,海洋 工程 .电力 工程 。 但 当 被 测 对 象 是 多 变量 系统 且 阶 数 较 高 时 ,模型 中 
的 参数 非常 多。 和 而且 在 这 种 模型 中 ,模型 结构 辨识 问题 一 直 末 解决 。 

31 神经 网 络 {neural hetwork) 模 型 

神经 网 络 近 年 来 得 以 飞速 发 展 , 并 已 有 效 地 用 于 非 线 几 系 统 的 辨识 和 控制 。 
目前 广 老 使 用 的 有 两 种 神经 网 络 ,一 种 是 多 层 (multi-layer) 神 经 网 络 , 另 一 种 是 循 
环 (recurrent》 神经 网 络 , 从 辨识 的 和 度 看 ,多 层 神 经 网 络 代表 了 毅 态 非 线 性 模型 ， 
而 循环 神 么 网 络 代表 了 动态 非 线 性 神 型 。Narendra 等 人 提出 了 老 层 前 馈 网 络 用 于 
非 线 性 辨识 的 一 般 框 架 ,Chen 和 Billings 等 从 基于 人 工 神 经 网 络 的 Narma 模型 出 
发 ,进行 了 类 似 的 研究 ,提出 了 并 行 递 推 预报 误差 压 识 方法 。 另 外 ,模糊 控制 和 和 神 
经 网 络 结合 产生 的 模糊 神经 网 络 (FNN) 也 可 以 用 于 非 线性 辨识 。 

比 其 他 非 线 性 办 识 方 法 优越 的 是 神经 网 络 可 以 不 依赖 模型 函数 ,也 就 是 说 ,可 
以 不 用 了 解 被 辨识 非 线 性 系统 (被 测 系统 ) 输 信和 输出 之 间 存 在 何 种 数学 关系 。 月 
前 用 的 较 多 的 是 具有 反 传 的 前 镇 BP 网 络 。 只 要 给 定 系统 输 人 样本 .网 络 的 结构 
以 及 系统 输出 的 教师 信和 号 ,给 网 络 一 组 输 人 样本 , 便 可 得 到 对 应 的 网 络 输出 ,利用 
网 络 输出 和 教师 信和 号 的 差 值 来 修正 网 络 的 权 值 和 冰 值 , 喜 双 满 足 要 求 。 换 名 话 说 ， 
利用 多 层 网 络 所 具有 的 对 任意 非 线 性 上 映射 的 逼近 能 力 ,来 模拟 实际 系统 的 输 人 输 
出 关系 。 但 BP 算法 存在 着 局 部 极 值 和 收 敏 速度 慢 等 无 法 克服 的 缺点 ,这 就 促使 
大 们 去 研究 其 改进 的 算法 。 我 们 对 一 类 非 线性 系统 神经 网 络 辨 识 作 过 上 几 种 怪 弃 性 
的 改进 算法 研究 , 收 到 了 较 好 效果 ,其 中 包括 降低 一 类 神经 网 络 灵 敏 度 的 理论 和 方 
法 、 提 高 一 类 神经 网 络 容错 性 的 理论 和 方法 、 提 高 神经 网 络 收 伍 速 度 的 一 种 赋 初 值 
算法 .改进 适应 度 函 数 的 遗传 神经 解 确 控制 器 隶属 函 数 型 神经 网 络 与 模糊 控制 栅 
合 的 方法 等 [2 -55, 吕 -6 。 这 部 分 内 容 在 第 7 章 展 开 讨论 。 

4) 万 .控制 理论 

应 用 五. 控制 理论 设计 的 控制 器 对 各 种 摄 动 (外 部 干 绾 信号 ,系统 肉 部 参数 变 
化 ,传感器 噪声 等 ) 的 灵敏 度 最 低 。 这 种 设计 可 以 使 SISO 系统 达到 最 优 ,但 对 
MIMO 系统 设计 的 控制 哄 阶 数 太 高 ,难以 实现 。 但 日 本 的 华人 专家 Sheng Tielong 
等 学 者 应 用 万 .控制 理论 对 MIMO 系统 的 设计 和 对 非 线性 系统 控制 做 了 大量 谋 
人 的 研究 ,认为 ,五 控制 理论 对 于 非 线性 系统 控制 具有 较 好 的 前 景 。 


妈 ( 大 让 
吕 () 
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5) 扩展 的 卡尔 曼 调 让 

扩展 的 卡尔 曼 羔 波 可 以 用 于 非 线 性 系统 的 状态 估计 。 尽 管 册 直 斯 (Bayes) 估 
值 给 出 了 一 种 坦 观 的 精确 表达 式 , 但 其 在 每 一 步 的 积分 运算 都 是 非常 困难 的 ,因而 
很 难 用 于 实际 计算 非 线性 的 状态 佑 计 。 扩 展 的 卡 乍 曼 滤 波 实 际 是 把 非 线性 模型 进 
行 线 性 化 处 理 , 然 后 利用 卡尔 曼 滤 波 进行 状态 估计 。 用 一 阶 近 拟 扩展 的 卡尔 曼 滤 
波 的 精度 与 系统 模型 的 非 线 性 特性 以 及 虽 声 水 平 有 关 。 当 非 线性 函数 参考 点 内 近 
比较 平 直 并 且 依 噪 比较 高 时 ,该 算法 一 般 可 获得 足够 精确 的 结果 。 为 考察 系统 精 
度 对 系统 进行 仿真 时 ,如 果 出 现 算法 发 散 或 精度 较 差 时 ,可 以 考虑 用 二 阶 近 似 扩展 
的 卡尔 曼 滤波 方法 。 

6) 微分 几何 法 

微分 几何 法 是 研究 非 线 性 系统 的 一 种 新 的 工具 ,其 作用 相当 于 SISO 线性 系 
统 的 拉 氏 变换 和 名 变量 系统 中 的 线性 代数 。 近 年 来 , 非 线性 系统 的 几何 理论 已 初 
昔 形 成 ,用 微分 几何 方法 可 以 有 效 的 解决 非 线 性 系统 的 能 控 性 ,能 观 性 .可 逆 性 . 解 
硝 、 最 小 实现 玉 系 统 的 对 称 性 .相似 人 性 等 问题 。 

另外 ,预测 (PC) .模糊 解 耦 (FD)、 滑 模 变 结构 (SMVS) .模型 参考 自 适 应 
(MRAC) .专家 控制 (EC) 或 相互 的 组 全 的 方法 克 可 用 于 非 线性 系统 的 控制 。 


1.5.2 非 线性 系统 参数 估计 的 特点 


参数 估计 是 在 模型 阶 或 模型 的 结构 已 确定 后 ,根据 系统 所 外 加 的 输 人 样本 及 
实测 到 的 数据 求 模型 中 的 参数 (或 模型 的 数学 表达 式 中 与 各 项 有 关 的 系数 )。 从 
参数 估计 的 角度 看 , 非 线 性 的 模型 可 分 为 线性 参数 模型 和 非 线性 参数 模型 。 

系统 模型 为 离散 化 的 方程 ,其 中 输出 变量 中 存在 大 于 或 等 于 二 次 以 上 的 项 ,其 
他 参数 .给 和 人 都 是 线性 的 ,该 模型 是 线性 参数 的 非 线性 模型 。 如 果 模 型 的 参数 是 非 
线性 的 , 且 输 入 输出 都 是 非 线 性 的 ,这 种 模型 是 非 线 件 参数 的 非 线 性 模型 对 参数 
佑 计 来 说 ,后 者 比 前 者 复杂 得 究 。 

目前 参数 估计 用 的 较 窗 的 方法 是 有 预 铀 误差 (Brediction error) 算 法 ， Jackoby 
和 Pandit，Billings 和 Chen 已 将 这 个 算法 用 于 估计 非 线性 模型 的 参数 ;各 种 改进 的 
最 小 二 乘 :Huffel 和 Van de Walle 基于 线性 变量 有 误差 模 型 推导 了 一 类 改进 最 小 
二 乘 算法 ,但 现实 仍 未 推广 到 非 线性 宰 型 的 参数 估计 ;Korenberg，Hillings，Liu， 
Mecllroy 将 直 交 最 小 二 琵 算法 推广 到 线性 参数 的 非 线性 模型 的 参数 估计 ; Billings 
和 Zhu 又 将 这 一 算法 进一步 推广 到 有 理 NARMAX 模型 ( 非 线性 参数 ) 的 参数 估 
计 , 这 一 结果 是 非 线 性 参数 佑 计 及 变量 有 误差 问题 研究 的 一 次 大 的 进展 、 研 究 非 
线性 模型 的 参数 估计 是 研究 非 线性 问题 的 一 个 重 惠 方 面 ， 
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1.5.3 神经 网 络 及 其 系统 控制 结构 


上 面 讨 论 了 神经 网 络 在 非 线性 辩 识 中 特点 ,这 部 分 主要 分 析 非 线性 系统 神经 
网 络 控制 的 研究 问题 。 磊 线 性 系统 控制 是 当前 自动 控制 领域 一 个 难点 。 而 基于 神 
经 网 络 的 非 线性 系统 控制 是 非 线性 控制 研究 中 的 一 个 热点 。 这 是 由 于 现代 控制 理 
论 是 以 完备 的 系统 模型 为 基础 ,使 得 将 其 用 于 非 线 性 系统 的 建 模 相当 困难 。 早 在 
人 工 神经 网 络 研 究 的 初期 ,就 已 开始 了 控制 领域 应 用 的 研究 ,但 人 迄今 为 止 , 人 工 挤 
经 网 络 办 识 方法 还 不 能 算 作 一 种 独立 的 成 熟 的 方法 ,只 是 在 原 有 的 非 线 任 控制 方 
式 中 用 神经 网 络 模型 替换 原 有 模型 , 且 将 网 络 的 训练 过 程 与 模型 参考 自 适应 .辨识 
过 程 结 人 台 使 用 。 应 根据 被 辨识 对 象 的 特性 探讨 出 实用 的 算法 。 作 者 在 神经 网 络 辩 
识 方 面 偿 试 过 几 种 较 有 效 的 改进 型 的 算法 己 -55'%-66] ,在 第 7 章 展 开 讨 论 。 

下 面 简要 提供 几 种 学 者 们 研究 的 神经 网 络 控制 结构 形式 及 其 现状 : 

1) 预测 控制 

预测 控制 又 称 为 预 估 控 制 。，Erramilli 殉 Witlinger.SeokaertP O M 和 Clarke D 
H 等 证 明 : 采 用 时 段 后 退 技 术 (receding horizon) 可 构成 一 种 计算 量 有 限 的 反馈 控 
制 算法 , 旦 这 种 算法 可 用 于 非 线 任 系统 ,使 系统 达到 稳定 。 在 这 种 算法 中 ,一般 出 
系统 输出 和 预测 的 方 益 值 .系统 本 时 刻 输 人 和 上 一 时 刻 输 和 人 的 方差 值 组 成 一 个 二 
次 型 指标 函数 。 根 据 系 统 前 一 时 段 的 输出 、 输 和 人 数据 ,可 由 网 络 来 预测 后 一 时 段 系 
统 的 输出 ,经 过 优化 处 理 , 即 下 得 到 使 指标 盟 数 最 小 情况 下 的 控制 信号 。 实 际 上 孔 
测 的 目的 是 给 系统 控制 器 的 设计 提供 参考 依据 。 

这 种 方法 已 成 功 地 用 在 很 光 领 域 ,如 对 大 量 的 通信 网 络 业务 量 的 处 理 , 学 者 们 
是 通过 神经 网 络 训练 ,掌握 通信 业务 源 的 内 在 规律 ,从 而 实现 实时 、 动 态 地 对 业务 
海 预测 ,其 结果 有 助 十 对 异步 转移 模块 (ATMD 网 络 的 控制 ;船舶 横 播 动 的 时 间 序 
列 预报 ;气象 预报 .工业 过 程控 制 等 方面 。 . 

2) 控制 系统 的 状态 监测 与 故障 诊断 

故障 诊断 实质 上 是 模式 分 类 的 过 程 。 利 用 监测 空间 到 故障 空间 的 映射 其 系 以 
及 对 系统 在 各 时 刻 采 集 到 的 状态 变量 , 羯 断 系统 运行 正常 与 否 。Timo Soraa 等 指 
出 ,用 于 控制 系统 监测 与 故障 诊断 的 神经 网 络 主要 有 MLP( 多 层 感 知 器 ) 神 经 网 
终 .RBE( 径 向 基 画 数 神经 网 络 ) .ART( 自 适应 共振 ) 神 经 网 络 和 SOM《( 自 组 织 映 
射 ) 神 经 网 络 等 。 后 两 种 非 监督 学 习 神 经 网 络 对 于 故障 诊断 准确 率 不 高 ,如 ART 
的 误诊 断 率 超过 30% 。 相 比 之 下 ,MLP 网 络 能 够 对 训 红 样本 可 划分 类 号 测试 结 
果 令 人 满意 。 

文献 [33] 提 和 出 系统 状态 监测 与 故障 诊断 方法 很 有 代表 人 性。 基本 步 又 是 :从 实 
际 控 制 系 统 提 取 监 测 状态 变量 构成 监测 向 量 已 ;将 已 作为 原始 输入 妊 本 ,根据 示 
数 型 连接 思想 对 王 进行 样本 模式 特性 增强 ,形成 和 ;根据 X 和 相应 的 监督 依 号 对 


第 1 章 办 识 的 基本 概念 "15 。 





神经 网 络 进行 离线 训练 ,从 而 获取 神经 网 络 的 结构 参数 ;在 线 对 系统 状态 监测 与 故 
障 诊 断 时 ,利用 已 训练 好 的 神经 网 络 对 系统 监测 的 状态 变 基 进行 泛 化 ; 显 杰 系统 的 
运行 状况 正常 与 要 。 

在 实际 控制 中 特别 是 被 控 对 象 具有 非 线性 特性 时 ,人 们 往往 无 法 得 到 被 挫 对 
象 的 解 术 模 型 ,更 无 户 依 据 古 典 或 现代 控制 理论 设计 有 效 的 控制 器 。 因 而 ,现场 技 
术 人 员 和 常 根 据 现场 工 咒 和 积累 的 经 验 对 系统 进行 控制 。 在 这 种 情况 下 , 可 采用 监 
督 控制 方式 。 这 种 控制 方法 已 被 用 于 智能 控制 的 决策 系统 ,倒立 摆平 衡 控 制 等 。 

3)》 模型 参考 自 适应 榨 制 

在 模型 参考 日 适应 控制 系统 中 ,系统 期 望 的 输出 特性 直 一 个 能 满足 系统 要 求 
的 参考 模型 给 出 ,控制 器 在 被 控 对 象 之 前 且 处 于 串联 连接 的 关系 。 基 于 神经 了 网络 
的 非 线性 系统 模型 参考 自 适应 控制 是 Narendra 等 提出 来 的 ,将 神经 网 络 用 作 控 制 
器 ,利用 被 控 对 象 的 输出 和 网 络 的 差 值 来 训练 网 络 ,网 络 的 输出 又 作用 给 被 控 对 
象 , 合 对象 的 输出 逐渐 通 近 参考 模型 的 理想 输出 ,最终 使 系统 达到 平衡 稳定 . 

4) 诺 模 入 制 

在 内 模 控 制 中 ,被 控 系 统 和 一 个 系统 的 前 向 模型 处 于 并 列 位 置 ,被 拉 对 象 的 输 
出 与 该 模型 的 差 值 作为 反馈 信号 送 到 帘 控 对 象 前 (控制 器 和 被 控 对 象 囊 联 连接 ) 的 
控制 器 ,该 系统 要 求 控制 器 范 数 是 被 控 对 象 的 道 。 由 于 内 模 控制 有 较 强 的 鲁 棒 性 ， 
因而 在 过 程控 制 中 得 到 了 广泛 的 应 用 。 目 前 已 研究 智能 自 适应 内 模 控 制 系 统 ,如 
文献 [26] 将 自 适 应 内 模 控 制 系统 在 线 调试 成 功 ,他 用 的 是 控制 器 参数 模糊 调 束 内 
模 控 币 系统 结构 。 用 神经 网 络 已 得 到 的 系统 模型 实现 非 线性 系统 的 内 横 控 制 方法 
是 Hunt 等 提出 的 ' 乓 。 内 覃 控制 器 参数 在 线 调整 是 根据 被 控 对 象 的 输出 与 神经 网 
络 模型 的 差 值 进 行 , 故 该 神经 网 络 必要 是 离线 或 在 线 扒 识 所 得 到 的 模型 , 它 一 定 要 
能 反映 实际 系统 的 特性 。 

S$) 模糊 神经 网 络 系统 

模糊 神经 网 络 系统 从 结构 上 看 主要 有 两 类 :一 是 在 神经 网 络 结构 中 引信 模糊 
逻辑 ,使 其 具有 直接 处 理 横 糊 信 息 的 能 力 ,把 一 般 覃 经 网 络 中 的 加 权 求 和 转 为 模 籽 
轩 辑 运算 中 的 “V “，，A "人 析 取 ; 取 大 、 即 并 "， 合 取 : 取 小 , 即 交 ”) ,从 而 形成 模糊 
神经 元 网 络 ;二 是 直接 利用 神经 网 络 的 学 习 功能 及 映射 能 力 ,去 等 效 模 籽 系 统 中 的 
各 个 模糊 功能 块 ,如 模糊 化 .模糊 推理 .模糊 判决 。 另 外 ,还 可 以 把 神经 网 络 和 模 精 
控制 用 在 同一 个 系统 中 ,以 发 挥 各 目的 特长 。 

J.R.Jang 采用 暂 存 反 向 传播 算法 实现 模 椭 神经 网 络 的 自学 习 沁 。 这 种 方法 
利用 自 适应 神经 网 络 实现 了 时 间 序 列 预 报 和 系统 辩 识 .并 形成 了 模糊 控制 器 。 倒 
立 摆 实验 结果 证 明了 这 一 方法 的 有 效 性 和 控制 器 的 短 棒 人 性。 神经 网 络 在 模糊 目 适 
应 控制 器 中 的 另 一 个 应 用 是 改进 和 增强 自 组 织 模 糊 控 制 器 的 学 习 能 力 。JT- Yama- 
guchi 等 提出 用 模糊 联想 记 亿 系统 (FAM) 实 现 自 组 织 模糊 控制 的 方法 刀 。FAM 
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利用 模糊 规则 表达 专家 知识 , 且 采 用 神经 网 络 的 自学 习 能 力 米 提 炬 知识 。 这 样 可 
在 模糊 规则 的 前 提 部 分 产生 期 望 的 束 属 男 数 分 布 ,在 结论 部 分 可 单独 训练 控制 硕 ， 
以 保证 在 特定 的 阴 制 条 件 下 达到 最 佳 。 从 两 个 可 调 参 数 的 模型 ( 直 升 袖 飞行 控制 
器 ) 仿 真 研 究 发 现 , 学 习 后 直升机 稳定 飞行 的 效果 明显 优 于 学 习 前 的 将 末 。 大 多 数 
的 模糊 神经 网 络 系统 被 看 做 分 层 前 馈 网 络 , 然 后 用 BP 网 络 来 实现 。Junbong Nie 
等 :2 提出 一 种 不 同 的 方法 ,通过 引 人 局 部 网 络 结构 和 前 局 推理 算法 ,用 整个 RBF 
《radial basis function) 网 来 表达 基于 规则 的 模糊 知识 ,并 将 其 发 展 成 多 变量 自 组 织 
和 自学 习 模糊 控制 器 ， 同 时 引 人 模 糊 竞 争 机 构 和 重复 学 习 控 制 算盘 ,使 得 基于 模 
精 的 RBF 网 {FRBF 网 ) 的 模糊 控制 器 在 缺少 “专家 知识 ”( 或 “教师 信号 ”) 的 情况 
下 ,能 自 组 织 其 结构 自学 习 控 制 规律 ,以 达到 满意 的 控制 效 昌 、 

在 实际 应 用 中 ,基于 神经 网 络 的 丘 适 应 模糊 控制 器 存在 的 主要 问题 是 :由于 神 
经 网 络 的 结构 复杂 .计算 量 大 ,使 得 控制 器 的 计算 时 间 过 长 。 如 何 用 简单 的 方法 对 
模糊 控制 回 进行 量化 ,并 转换 成 易于 学 习 的 算法 :借用 何 种 学 习 算 法 ,如 何 确定 学 
习 指 标 ,构成 有 效 的 模糊 控制 学 习 系统 ;如 何 用 神经 网 络 表达 革 种 模糊 模型 等 ,都 
是 有 符 进 一 步 研 究 的 问题 。 


1.5.4 非 线 性 解 炉 问 题 


耦合 是 生产 过 程 动态 特性 普遍 存在 的 一 种 现象 。 若 被 控 对 象 存在 耦合 ,势必 
降低 控制 系统 的 调节 性 能 。 耦 合 严重 时 ,会 使 系统 无 法 正常 运行 。 因 此 对 解 耦 问 ， 
题 的 研究 无 论 是 对 控制 理论 的 发 展 还 是 对 工程 实际 都 是 非常 有 意义 的 。 

目前 有 许多 方法 用 于 多 变量 控制 的 解 耦 问题 ,在 工程 上 应 用 最 多 的 解 耦 方法 
是 Bokesenbom Hood 提出 的 对 角 虐 阵 法 和 Bristal 提出 的 相对 增益 法 ,它们 均 是 基 
于 过 程 通 道 的 传递 画 孝 来 设计 解 耦 控制 器 ,使 系统 的 零 极点 对 消 的 方法 ,可 得 到 入 
便 形 式 的 控制 器 ,但 这 些 方法 使 得 被 控 对 象 的 动态 特性 发 生变 化 ,而 且 变 得 相对 复 
杂 些 ,从 而 使 控制 器 的 设计 有 一 定 困难 。 前 馈 补 偿 解 三 控制 也 有 用 到 工程 中 的 ,前 
局 补偿 解 耦 实际 是 把 某 通道 的 调节 器 输出 对 另外 通道 的 影响 看 做 是 扰 动 作用 , 然 
后 应 用 前 千 控 制 的 原理 消除 回路 的 耦合 ,以 上 解 硬 方 法 均 要 求 系统 模型 确定 。 而 
非 线 性 系统 多 属 参 数 易 变 ,模型 不 确定 。 因 此 上 述 解 耦 方法 不 应 用 于 非 线性 系统 
的 解 耦 。 

尽管 解 看 理论 已 取得 了 不 少 成 果 , 但 与 最 优 控 制 、. 自 适应 控制 等 其 他 分 文 相 
比 , 解 三 理论 在 工程 的 应 用 确 不 能 令 人 满意 。 

目前 ,利用 模糊 理论 对 多 变量 非 线 系统 进行 控制 或 解 硝 控 制 也 是 研究 非 线性 
问题 的 一 个 热点 。 国 内 外 对 多 变量 模糊 控制 系统 的 研究 方 兴 末 艾 .逐渐 成 为 模糊 
领域 研究 的 热门 课题 。 多 变量 模糊 控制 系统 主要 有 :分 层 多 变量 模糊 控制 器 .日 学 
习 模糊 控制 器 .基于 模型 的 多 变量 模糊 控制 方法 .多 变量 的 司 糊 解 碍 以 及 基于 运 经 
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网 络 的 异 糊 控制 。 

模糊 解 硝 的 结构 与 特点 大 致 包括 ; 

1) 直接 模 棚 解 精 

这 种 方法 是 对 被 控 对 象 和 解 硝 补 偿 器 相 串 联 , 先 进行 解 硝 , 然 后 针对 解 硝 后 的 
各 变量 进行 模糊 控制 普 计 。 该 方法 是 徐 承 伟 和 吕 勇 哉 首先 提出 来 的 ,给 出 了 实现 
解 耘 的 一 个 充 要 条 件 ,但 解 耦 补偿 器 的 结构 和 参数 用 经 验 试 污 法 离线 确定 的 ,没有 
通用 法 ,很 难 实 现 完全 解 耦 :361。 随 后 ,他 们 又 提出 模糊 关系 系统 的 反馈 解 硝 考虑 
到 用 于 多 输入 多 输出 (MIMO) 系 统 的 情况 ,文中 给 出 了 实现 解 硝 的 一 个 充分 条 件 ， 
但 控制 器 的 构成 尚 缺 少 理论 依据 21。 

2) 间接 模糊 解 而 法 

Chen 等 引入 相 关 困 了 手 , 研 究 出 一 类 多 变量 模糊 控制 医 。( 7zogalaand 和 Zim- 
mermann 引信 随机 相关 关子 .利用 此 类 因子 构造 出 密约 概率 模糊 控制 藉 ，Cupta 
等 在 此 研究 基础 上 ,提出 通过 对 多 变量 模糊 控制 规则 进行 子 空间 的 分 析 , 然 后 用 一 
组 二 维 模糊 方程 措 述 多 维 模 糊 控制 规则 。 文 献 [40. 对 Gupta 解 碍 算法 中 采用 的 
Manmqani 推理 人 台 成 规则 进行 了 改进 ,提出 -种 新 算法 ,将 “max-min ”合成 算 子 修改 
为 “max 六 "运算 从 理论 十 证 明了 采用 新 的 合成 算 子 所 得 到 的 推理 结论 更 为 确定 ， 
有 满 足 一 发 性 条 件 。 

总 之 ,模糊 解 耦 控制 系统 的 研究 尚 处 于 发 展 阶 段 , 很 元 结论 只 是 理论 推导 ,还 
不 能 进 人 实验 室 进 行 验证 。 同 时 ,针对 解 耦 之 后 控制 系统 的 稳定 性 .可 控 丰 观 性 的 
研究 也 尚未 成 型 ， 因 此 ,无 论 是 针对 控制 对 象 还 是 针对 控制 器 解 耦 ,当前 急需 要 解 
决 前 问题 是 如 何 由 模糊 关系 方程 求解 各 个 解 精 后 的 模糊 子 关系 ,尽量 沽 少 前 述 方 
法 所 吉 的 约束 条 件 ,得 到 令 人 满意 的 仿真 效果 . 


1.5.5 需要 深入 研究 的 非 线性 问题 


智能 控制 是 传统 控制 理论 发 展 的 高 级 阶段 ,主要 用 来 解决 那些 用 传统 方法 无 
法 解决 的 复杂 系统 ( 非 线性 系统 ) 控 制 问 题 。 前 述 的 神经 网 络 及 模糊 控制 均 属 智能 
控制 范畴 , 即 是 智能 控制 的 一 个 分 支 。 智 能 控制 中 也 有 不 少 需要 辨识 模型 的 问题 。 
全 球 第 一 届 智 能 控制 会 议 从 1993 年 8 月 在 北京 召开 以 来 ,相继 于 1997 年 在 西安 
交通 大 学 ,2000 年 在 合肥 .2002 年 在 上 海 和 2004 年 在 杭州 召开 了 四 届 全 球 智能 兵 
制 会 议 ,会 上 全 球 关 注 智 能 控制 的 专家 研讨 矢 能 控制 的 热点 问题 。 今 后 如 和 何 按 人 
们 所 美 心 的 问题 去 研究 .从 智能 控制 应 用 发 展 看 ,应 从 以 下 于 方面 研究 : 

1) 网 络 理论 方面 

在 发 展 人 工 神 经 网 络 理 论 中 ,要 罕 出 其 学 刁 ,并行 处 理 、 联 想 记 忆 功 能 。 进 一 
步 开发 Petri 网 及 其 他 网 络 功能 ,因为 这 些 网 络 在 系统 建 模 时 已 脱离 了 传统 的 方 
法 ,给 知 能 控制 带 来 了 生机 。 尤 其 是 在 神经 网 络 和 逼 近 非 线性 前 数 ( 特 性 ) 及 其 控制 
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系统 方面 应 解决 如 下 问题 。 

(1) 对 不 同 的 和 逼 近 对 象 ,如 在 办 识 中 对 不 同 的 被 辨识 非 线性 模型 ,如何 选择 填 
经 网 络 结构 ,当选 择 前 僻 多 层 网 络 时 ,问题 就 落实 到 如 和 人行 确定 网 络 的 总 体 结 梅 形 
式 .网络 层 数 ,以 及 每 层 节 点 的 个 数 , 目前 还 缺乏 理论 指导 。 尽 管 有 不 少 学 者 投 千 
到 该 问题 的 研究 中 ,但 只 停留 在 经 验 上 和 和 启发 式 的 规则 上 ,问题 有 待 深 人 研究 . 

(2》 从 如 何 提高 阿 络 的 训练 速度 上 深 人 研究。 要 从 阿 络 作用 国 数 的 瞻 射 机 
理 .网 络 的 灵 敬 度 .网 络 的 容错 能 力 以 及 抗 干扰 性 等 问题 上 深入 研 究 , 拷 出 现 有 网 
络 逼 近 复杂 非 线性 特性 速度 慢 的 根本 原因 ,进而 斌 究 提高 训练 速度 的 理论 和 方法 。 

《3) 从 提高 神经 网 络 系统 的 控制 精度 方面 研究 。 神 经 网 络 作 为 榨 制 器 对 系统 
进行 实时 控制 时 ,由 于 网 络 的 训练 速度 限制 ,加 之 非 线 性 系统 的 复杂 性 ,使 得 这 一 
问题 具有 相当 大 的 难度 。 对 于 这 种 系统 的 稳定 性 .可 控 性 理论 还 需 这 和 人 人 研究， 另 
外 ,由 寺 非 线性 系统 的 噪声 是 普 站 人 存在 的 ,因此 研究 如 何 提 疯 了 网络 抗 于 抗 性 .降低 
灵敏 度 及 提高 神经 网 络 控制 器 的 钴 棒 性 问题 是 提高 神经 网 络 系统 的 控制 精度 的 关 
键 , 须 进一步 深 人 研究 。 

另外 ,神经 网 络 发 展 的 最 终 要 以 大 规模 的 高 精度 的 并 行 计算 集 成 电路 ( 硬 位 ) 
来 实现 ,因此 ,神经 网 络 的 三 伞 开 发 及 其 研究 也 是 一 个 研究 神经 网 络 的 重大 发 展 方 
向 。 若 这 个 问题 能 解决 ,将 对 神经 网 络 控 制 复 杂 的 非 线 性 系统 的 控制 速度 及 精度 
提高 是 一 个 很 大 的 促进 。 

2) 模糊 控制 理论 

(1) 模糊 集 理 论 的 研究 。 模 糊 集 理论 是 介 于 逻 莉 计算 与 数值 计算 之 陨 的 一 种 
数学 工具 ,其 形式 上 利用 规则 模糊 推理 。 这 正 补 偿 卫 人工 神经 网 络 的 弱点 。 

(2) 从 多 变量 模糊 控制 的 理论 方面 研究 。 其 中 有 模糊 规则 设计 方法 ,包括 隶 
属 函 数 的 确定 . 量 共 因子 .采样 周期 ,规则 系数 的 最 优选 择 ,规则 和 隶属 函数 的 自动 
生成 等 ;多 维 模糊 推理 方法 的 研究 , 以 清 足 高 性 能 多 变量 控制 器 设计 的 需求 ;多 变 
量 控制 系统 稳定 性 的 研究 ,以 及 对 可 挖 性、 可 观 性 等 性 能 指标 的 评估 方法 ;模糊 动 
态 模型 的 辨识 方法 及 相应 的 自学 习 方 法 :基于 模型 的 模糊 自 校 正 控 制 系统 的 研究 ; 
神经 网 络 与 模糊 控制 相 结 合 ,从 而 提高 系统 控制 精度 方法 的 研究 ;实用 多 变量 控制 
技术 的 开发 与 应 用 ,为 解决 像 移 自由 度 的 机 器 人 柔性 运动 控制 这 样 的 复杂 问题 服 
务 。 重 要 发 展 动向 是 MIMO 模糊 控制 器 的 集成 化 和 MIMO 模糊 计算 机 的 开发 。 

3) 信息 融合 理论 及 方法 的 研究 

一 个 复杂 的 多 变量 非 线性 系统 要 得 到 较 理 想 的 控制 效果 ,多 个 传感器 多 种 信 
息 的 融合 是 关键 。 除 了 传统 的 基于 Bayes 参数 估计 数据 融合 方法 外 ,应 对 基于 异 
轩 理 论 信 息 融合 方法 .粗糙 集 理 论 与 智能 方法 结合 的 信息 融合 方法 进行 研究 。 

4) 数据 挖掘 

数据 挖掘 方法 是 对 复杂 的 狗 变 量 非 线性 系统 研究 的 重要 方法 之 一 。 支 持 加 量 
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机 技术 可 经 济 .有效 的 挖掘 所 需 的 甚至 是 无 法 测 到 的 ( 野 点 ;数据 。 

5) 知识 工程 的 研究 

尤其 作为 智能 控制 重要 分 支 的 专家 系统 .学 习 系 统 都 离 不 开 知 识 的 运用 ,知识 
的 获取 和 更 新 ,因而 知识 工程 应 进一步 研究 。 

6) 系统 可 靠 性 能 理论 的 研究 

一 个 智能 控制 系统 的 正常 运行 , 离 不 开 故 简 诊 断 , 故 障 的 随时 检测 与 日 动 排 
除 ,以 玉 一 些 算法 中 的 宛 余 ,容错 理论 的 研究 对 系统 控制 的 可 靠 性 至 关 重 要 。 

7) 混 藻 的 诱导 与 控制 

非 线性 控制 系统 的 混沌 研究 也 是 对 控制 学 科学 者 们 的 新 挑 吉 。20 世纪 70 年 
代 , 美 国 大 气 物理 学 家 Lorenz 在 实验 室 里 观察 到 一 个 完全 确定 的 非 线性 方程 组 
( 现 被 称 为 的 Lorenz 方程 ) ,对 初 值 异 常 敏 感 ,具有 狐 似 随机 依 号 的 输出 。 十 多 年 
后 , 许 客 学 者 相继 在 不 同 的 领域 中 发 现 了 这 种 现象 。Li 和 Yerke 首先 称 之 为 " 遍 
沌 fchaosj"”。 这 在 科学 办 引起 了 一 场 很 大 的 振动 ,有 的 学 者 认为 ,混沌 现象 的 发 现 
再 定 了 传统 的 确定 论 时 空 观 ,将 是 20 世纪 量子 力学 和 相对 论 之 后 第 三 次 技术 观念 
的 革新 。 广泛 地 说 ,器 件 的 非 线性 是 绝对 的 ,而 线性 是 相对 的 。 线 性 状态 只 是 非 线 
性 状态 的 一 种 近世 吉 … 种 特例 而 已 。 由 于 混沌 运动 十 非 线性 系统 的 一 种 普遍 的 运 
动 ,模糊 了 传统 的 确定 系统 和 随机 系统 的 界限 ,目前 是 最 活跃 的 科学 领域 之 一 ,已 
成 为 数学 .物理 .化 学 .力学 .光学 .天 文学 及 脑 科 学 等 重 多 学 科 的 重点 研究 课题 。 
对 这 种 新 的 、 复 杂 的 混沌 对 象 的 研究 ,传统 基于 小 扰动 。 线 性 化 的 处 理 方法 不 再 适 
用 ,有 具 居 的 学 科 的 一 些 定义 .定理 可 能 将 改变 (如 控制 理论 中 系统 的 稳定 分 为 : 营 值 
稳定 ,周期 稳定 .混沌 状态 )。 混 钝 的 特征 :对 初 值 异 常 敏感 ,不 能 进行 长 期 预测 , 确 
定性 系统 却 貌 似 随 机 的 响应 ,局 部 不 稳定 ,但 是 总 体 吸 引 ,与 常规 运动 (平衡 周期 
运动 . 准 周期 运动 ) 不 同 ,是 一 种 始终 限于 有 限 区 域 并 且 轨 迹 不 重复 性 态 复 瑟 的 运 
动 。 文 献 [71] 指 出 :控制 系统 的 混沌 运动 来 自 三 个 方面 : 一 是 非 线 性 控制 系统 本 
身 的 混沌 ;二 是 控制 算法 带 来 的 混沌 ;三 是 系统 离散 化 引起 的 混沌 。 者 系统 模型 用 
状态 方程 来 撒 述 ,对 定常 系统 而 音 ,只 有 三 阶 以 上 的 系统 能 够 产生 混沌 。 近 年 来 有 
关 专家 对 混沌 识别 与 混沌 系统 辨识 .混沌 系统 的 诱导 与 控制 进行 了 深信 的 研究 ,这 
对 非 线 人 性 问题 的 稳定 控制 开辟 了 新 的 途径 。 有 关 反 馈 动 态 系统 出 现 的 汶 沌 现象 、 
基于 控制 理论 的 混沌 分 析 方 法 .混沌 识别 与 混沌 系统 因 识 问题 在 第 8 章 展 开 。 


1.6 小 结 
本 章 有 是 系统 和 模型 及 辨识 建 模 的 基本 疗 念 ,其 中 1.1.1.2 节 包括 模型 的 表现 


形式 及 数学 模型 的 分 类 . 辩 误 的 定义 ;1.3 节 介 绍 了 办 识 的 问题 的 表示 形式 及 原 
理 ,其 中 包括 辨识 问题 的 表达 形式 ,辨识 算法 的 基本 原理 和 误差 准则 ;1.4 节 是 辩 
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识 的 内 容 和 步骤 ;最 后 ,1.5 节 介 绍 了 典 型 的 非 线 性 系统 办 识 与 控制 方法 ,其 中 包 
括 非 线性 系统 辨识 与 控制 方法 的 特点 . 非 线性 参数 估计 的 特点 ,神经 网 络 及 其 控制 
系统 结构 . 非 线 性 解 兢 及 需要 深 人 研究 的 非 线 性 问题 。 








习 题 
1. 简 述 数学 模型 的 表现 形式 及 其 分 藉 。 
2. 辨识 建 模 的 定义 是 什么 ? 
3. 辨识 问题 的 表达 形式 是 什么 ? 
4. 什么 是 辩 识 的 误差 准则 ? 
5. 简 述 辨识 的 内 容 和 步骤 。 
6. 神经 网 络 非 线性 辨识 的 主要 特点 是 什么 ? 


第 2 章 办 识 理论 基础 及 古典 辨识 方法 


本 章 是 系统 辩 识 基础 ,包括 因 识 的 理论 基础 和 古典 辨识 法 酋 部 分 内 容 。2 .1 -: 
2.4 节 主 要 介绍 随机 过 程 的 基本 概念 及 其 数学 描述 .线性 系统 在 随机 答 入 王 的 响 
应 等 ,并 讨论 随机 序列 和 自 蜡 声 及 其 产生 方法 。 系 统 辨识 所 用 的 数据 通常 含有 了 品 
声 , 它 的 基本 概念 及 其 产生 方法 与 系统 辨识 密切 相关 。 因 此 ,分 别 讨论 并 剖析 用 
MATLAB 详 言 开发 的 产生 随机 序列 、 白 嗓 声 和 M 序列 的 三 种 程序 。 在 2.5 季 古 
和 典 辩 识 法 中 ,介绍 相关 分 析 法 辨识 和 相关 函数 的 概念 , 订 论 相关 分 析 频 率 响 应 和 相 
关 分 析 脉 冲 啊 应 法 办 识 , 并 列举 相关 分 析 脉 冲 响 应 法 辨识 的 实例 。 


2.1 随机 过 程 基 木 概念 及 其 数学 描述 
2.1,1 基本 概念 


在 科学 技术 领域 中 ,人 们 观察 到 各 式 各 样 的 事物 变化 过 程 。 有 些 变化 过 程 具 
有 了 明确 的 规律 性 ,如 自由 落体 运动 .电容 充电 过 程 等 ,这 些 称 为 确定 性 过 程 。 还 有 
些 变化 过 程 具 有 偶然 性 ,例如 电子 放大 占 的 零点 漂移 、 风 浪 中 海面 的 起 优等 ,人 们 
无 法 预知 下 一 时 刻 将 会 发 生 什 么 情况 ,这些 称 为 随机 过 程 。 对 于 随机 过 程 ,我 们 可 
以 在 完全 相同 的 条 件 下 (在 人 们 力所能及 的 意义 上 ) 进 行 多 次 测试 ,这 样 就 得 到 很 
多 样本 ,它们 的 变化 过 程 互 不 相同 。 样 本 具有 偶然 性 ,但 他 们 的 总 体 却 往往 具有 统 
计 意 义 上 的 规律 性 。 按 照 严格 的 定义 ,所 请 “随机 过 程 " 就 是 指 大 量 样本 z1(z)， 
za2t,… 所 构成 的 总 体 。 


1. 随机 过 程 数学 措 述 


为 了 对 随机 过 程 xf( 电 进 行 数学 描述 ,应 该 注意 以 下 几 点 : 

0 在 每 一 孤立 的 骨 间 ,xb 的 取 值 是 随机 的 , 它 是 一 个 随机 变量 。 因 此 ， 
zft) 首 先 可 以 用 描述 一 维 随机 变量 的 方法 加 以 描述 ,这 就 引出 随机 过 程 一 维 概率 
密度 5ifz , 的 概念 。 

《2) 沿 时 间 坐 标 轴 奢 ,zt 是 的 取 值 随时 间 变 化 的 过 程 。 为 了 完整 的 描述 
一 个 了 睛 机 过 程 , 还 需 反 映 不 同 的 时 刻 z 取 值 之 同 的 联系 。 二 维 概率 内 度 4zl， 
xz2it15t2) 代 表 7 在 六 时刻 取 值 为 xl,2 时 刻 取 值 为 zx 的 概率 密度 。 这 就 是 说 ， 
patzT rstt)dzlidrz 代 表 z( 间 相 继 通过 随机 过 程 图 2.1 中 dzri 和 dzrz 两 个 
小 窗口 的 概率 。 
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(3) 严格 意义 上 说 ,要 真正 完整 地 擂 
述 z(2), 除 一 维 .二 维 概率 密度 外 . 还击 
虱 三 维 .四 维 …… 概 率 密 度 。 这 几 平 是 
无 法 满足 的 可 刻 有 要求。 在 实际 应 用 中 ， 
大 们 不 得 未 满足 于 用 某 些 数字 特征 来 近 

: 位 地 刻画 一 个 随机 过 程 。 


2， 随 机 过 程 的 硅 征 


在 实际 应 用 中 ,人 和 们 只 限于 上 用 一 些 
量 基本 的 数字 特征 来 刻画 zft), 即 altz,o 和 Pafzirzitit) 有 关 的 两 类 数字 


特征 。 
如 果 平 稳 随 机 过 程 4) 的 各 集合 平均 值 等 于 相对 应 的 时 间 平 均值 , 即 


袜 一 天 > 
| = 开 (r) ( 
式 中 ,> 为 随机 过 程 z( 电 的 时 间 均 值 ( 指 对 dr 的 积分 的 均值 ]; As 为 与 一 维 概率 
密度 让 (zi) 有 关 的 数字 特征 量 集合 均值 ( 指 对 dz 的 积分 的 均值 ); Re(r) 为 自 相 
关 函 煞 。 则 称 z( 瘤 是 各 态 轴 历 的 平稳 的 随机 过 程 。 
对 于 各 态 遍 历 的 平稳 随机 过 程 , 它 的 两 个 基本 数字 特征 就 可 以 只 根据 一 个 很 
长 的 样本 按 下 式 计 算 


im 二 | zfzd 
ja 二 ji 3 了 站 (于 





图 2.1 pfziz2stta)dridzz 概率 


1 (2.2) 
及 -fr) = jim | Et 十 二 


实际 上 ,只 能 使 了 取 尽 可 能 大 的 有 限 值 , 见 图 2.2。 假 定 工 = NTo,r= To 为 采样 
时 间 , 则 式 (2.2) 变 为 


1 立 
2 一作,T( 开 ) 
六 之 


及 (r) 公民 (7 (CDz( 十 站 


(2.3) 

以 上 只 讨论 了 一 个 天 机 过 程 单 狐 存 在 时 

的 情况 。 有 时 在 同一 个 问题 中 涉及 两 个 豆 相 
有 关 的 随机 过 程 z(z 和 3?(t) ,例如 一 个 出 现 - 
在 过 程 的 输入 侧 , 另 一 个 出 现在 输出 侧 ， 则 可 “ 
用 互相 关 函 数 和 互 协 方差 丽 数 来 找 述 它们 之 图 2.2 各 和 Rr(r) 的 近似 计算 
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间 的 联系 。 
互相 关 画 数 
ReCr) 会 开 iz(t)y 人 + (2 .4) 
互 协 方差 图 数 
Cr)Acovirftytt+r)l 全 ltzft 一 中 [or) 一 po]| 
= 及) 一 ap (2 .5) 


若 Cr)=0,Y 一 co<r<xo, 则 称 zt 与 ?() 互 不 相关 。 
2.41.2 相关 函 教 和 协 方差 函数 的 性 质 


1)》 自 相关 函 数 和 自 协 方差 函数 具有 以 下 性 质 
(1) 
Ret0) = Rizttiztt+0 = 上 s 之 0 (2.6) 
(2) 根据 RR(zr) 的 定义 ,显然 有 R.(- rz) = 民 .(r), 这 说 明 R (rz) 对 称 于 纵 
轴 。 
(3) 
Rs:Cr)i 扫 尺 -(0) (2.7) 
(4) 有 时 将 设计 的 念 随机 信号 ,如 M 序列 ,具有 周期 性 , 称 为 局 期 性 "随机 过 
程 。 它 们 的 自 相关 函数 也 具有 周期 性 , 即 若 ztt+T)=xr(t), 则 尽 (rz+T)= 
及 rio 
(5) 若 zx(i) 均 值 不 为 零 , 则 可 分 解 成 z(i) = 只 站 上 大, 式 中 (0 是 均值 为 
零 的 随机 过 程 。 此 时 
Refr) = 巨 1[w( 人 t+pzlyttt+r)+Ari=Rrt+Aa (2.8) 
换 寄 之 z(+) 中 的 直流 成 分 使 其 自 相 关 函 数 向 上 平移 / 忆 。 
(6) 若 出 现 x(z) 均 值 为 零 , 旦 不 含有 周期 性 成 分 , 则 当 r 很 大 时 , z(i + r) 与 
x(1) 必 然 是 相互 独立 的 。 因 而 此 时 R,(r) =0。 
(7)》 (= zt+za( 且 辣 (与 总 ( 归 互 不 相关 
Rr(r) = 妨 ar)+ 玉 okr) (2.9) 
根据 以 上 渚 性 质 , 可 知 Re(z) 所 具有 的 一 般 形态 ; 它 对 称 于 纵 轴 , 且 在 == 0 处 取 
级 大 值 (但 并 不 意味 着 在 该 点 有 R， (r) =0)。 此 外 还 可 以 从 * 很 大 时 曲线 的 形 


态 判 明 *f{t) 之 均值 是 否 为 零 ,以 及 它 是 否 含有 周期 性 成 分 。 

《8) 自 协 方差 函数 Cr) 与 自 相关 困 数 尽 .(zr) 的 基本 关系 是 Cr = 
民 tzr) 一 皮 , 因 而 C(r) 等 于 只 fr) 向 下 平移 心 。 显 然 , 除 此 之 外 , 它 保留 民 -(r) 
的 形态 不 变 。 
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2) 互相 关 函 数 与 互 协 方 益 晒 数 的 性 质 

(1) R(r) 既 不 是 r 的 侦 函 数 ,也 不 是 r 的 奇 咀 数 。 换 言 之 ,互相 关 未 数 不 
具有 对 称 性 。 

(2) 民 r(r) 全 已 IDDTCETT 有 天 Rootr) 但 Re 一 z) = 下 | 一 z 
三 开 rjo 

(3) 车 cfrj,yfzr) 中 至 少 有 一 个 均值 为 零 , 则 Cr 三 尺 strjs 


2.2 谱 密 度 与 相关 函数 
2.2.1 帕 塞 瓦尔 {Parseval) 定 理 与 功率 密度 谱 开 示 式 
贴 寨 所 尔 定理 ,党 将 幅 讲 所 尔 定理 视 为 确定 性 过 程 的 总 能 量 谱 表示 式 。 苍 将 
确定 性 过 程 =(z) 视 为 流 经 10 电 限 的 电流 , 则 | ”zz(z)dz 代表 总 能 量 。 如 果 
z(z) 的 傅 里 叶 变 换 X(jo ) 存 在 , 则 可 以 证 明 总 能 量 为 
人 sode = 二 | 1xGo)Paw 人 .10) 


上 式 称 为 帕 塞 瓦尔 定理 。 它 把 总 能 量 以 频谱 的 形式 表达 出 来 。 
证 明 由 于 <( 纺 和 X(iw) 构 成 一 组 傅 里 叶 变换 对 , 故 


天 (joy)》 一 | zt Je wd 





_ {2.11) 
如 (一 | xGo)anean 
因此 _ 
| zat )dr = 记 | ze 过 | XGojande|a 
一 二 | ”xGo)[| =(oDe“dr ja 
= 二 | 和 (ja jo)daw 
- | | X(jwjl2dm (2.12) 


2.2.2 维 纳 - 辛 钦 (Wiener- 必 hintchine} 关 系 式 


可 以 证 明 ,随机 过 程 z( 妆 的 谱 密度 S,(o) 与 自 相 关 函 数 民 .(zr) 之 间 存 在 极 
其 简单 的 关系 一 一 它们 梅 成 一 组 傅 里 时 变换 对 , 邹 


革 了 2 章 内 识 理论 基础 及 古典 替 识 方法 “25 。 
S (wa) = | 尽 (r)eriedr 


1] < 
RUz) =- 二 | S_(wjesrda 
If -om 


式 人 2.13) 称 为 维 纳 - 注 钦 大 系 式 。 
考虑 到 S,(w) 和 及 (rr) 均 为 实 偶 阔 数 , 故 式 (2.13) 可 简化 为 


Sa) = ?| Re(r)eosordr 
< 1 re 《2.14) 
Re) 一 一 | 礼 【oa )eosmrde 

下 


它 是 维 纳 - 辛 钦 关 系 式 的 余弦 变化 形式 。 
如 上 所 述 ,对于 一 个 单独 存在 的 随机 过 程 zfr), 维 纳 - 莹 钦 关 系 趟 指明 S,(oam) 
与 及 fr) 构成 一 组 博 里 叶 变化 对 。 
如 果 在 同一 问题 中 出 现 两 个 随机 过 程 zt 和 yw(), 则 除 它 们 各 自 的 自 相 关 
图 数 和 谐 密度 以 外 ,还 用 互相 关 函 数 Rs,tr) 来 描述 两 个 随机 过 程 之 间 的 联系 。 此 
时 可 以 设想 把 维 纳 - 辛 钦 关 系 式 加 以 推广 ,从 而 引出 " 互 谱 密 度 "的 概念 ,定义 互 谱 
密度 为 于 相关 函数 的 傅 里 时 变换 。 由 于 RR (Cr 并非 俑 图 数 , 故 它 的 傅 里 叶 变 换 不 
是 实 函 数 而 是 复 函 数 ,将 互 谱 密度 记 为 S-,(jw)。 因 而 存在 以 下 关 季 
Su(io) = | Rs(rnerwedr 
和 (2.15] 
Rs(r) = 二 | Suftio)aedo 
汪 了 把 一 四 工 小 


2.3 线性 系统 在 随机 答 人 下 的 啊 应 


线 任 系统 在 平稳 随机 输 人 下 ,经 过 一 段 过 度 过 程 后 ,其 输出 w%( 所 也 是 一 个 稳 
定 的 随机 信号 。 线 人 性 系统 的 特性 可 用 单 入 脉冲 四 应 gfr) 和 频率 响应 时 间 各 (ja ) 
来 描 述 。gi 和 Gfjow) 构 成 一 组 博 里 寺 变 换 对 ,考虑 到 gft=0,Yi<0, 则 有 
1Gkia) = soDeimdr 册 中 
5(O = 守 | GGoyardo 
线性 系统 在 随机 答 人 下 输出 yo) 的 谱 密 度 S,(o ) 与 输 人 xf 所 的 谱 密 度 
S.(om) 之 问 有 以 下 关系 
Seo) = 1Gfjc)12sS(ta) (2.17) 
系统 在 篆 机 输入 下 ,系统 输入 输出 互相 关 谱 岂 度 Stjiw ) 和 输入 谱 密度 


2 系统 撩 识 及 其 MATILAB 份 真 


Si(w) 之 间 有 以 下 关系 





Sa) = 五 (0Ja)S( 石 ) (2,18) 
比较 式 (2.17) 与 式 {2.18) ,前 者 表明 ,对 于 系统 的 随机 输入 关 ( ,输出 谱 密 度 
Suw) 只 及 有 映 线 性 系统 的 幅 值 特性 ; 后 者 表明 ;输入 输出 五 相关 谱 密度 S (jw) 反 
峡 线 性 系统 的 动态 特性 。 在 随机 输入 情况 下 ,通过 谱 密 度 分 析 可 以 确定 未 知 线性 
系统 的 频率 响应 


2.4 日 噪声 产生 方法 及 其 仿真 


因 识 所 用 的 数据 通常 含有 噬 声 。 如 果 这 种 噪声 相关 性 较 弱 或 者 强 庆 很 小 , 则 
可 以 近似 将 其 视 为 白 噪 声 。 因 此, 白 嗓 声 是 一 类 非常 重要 的 随机 过 程 , 它 的 基本 概 
总 及 其 产生 方法 与 系统 挟 识 密切 相关 ， 


2.4.1 和 白 噪 声 的 概念 


1) 名 唤 声 的 特点 

白 品 声 过 程 是 一 种 最 简单 的 随机 过 程 。 严格 地 说 , 它 是 一 种 均值 为 零 , 谱 效 度 
为 非 零 常 数 的 平稳 随机 过 程 ,或 者 说 它 是 由 一 系列 不 相关 的 随机 变量 组 成 的 一 种 
理想 化 随机 过 程 。 上 品 声 过 程 没 有 "记忆 性 " ,也 就 是 说 上 时刻 的 数值 与 ! 时 刻 以 
前 的 过 去 值 无 关 , 也 不 影响 上 时刻 以 后 的 将 来 值 。 如 图 2.3 所 示 。 


自 刚 出 





人 外 100 1 和 
训 


醒 2,3 忽 刚 声 直 程 
站 品 声 过 程 可 以 在 数学 上 描述 如 于 ;如果 随机 过 程 wz 的 自 相 关 函 数 为 
忆 (rc) 三 ofzr) (2.19) 
式 中 ,5(r) 为 Dirmac 朱 数 , 即 
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co，Tzr= 心 
一 候 
Br) | -0 【2.20) 


下 


且 
| frydr=1 (2.21) 


则 称 该 随机 过 程 为 白 唆 声 过 程 。 注意 在 上 述 定义 中 已 经 包 信 了 均值 为 党 的 概 意 。 
由 于 8(r) 的 傅 里 叶 蛮 换 为 1 ,根据 维 纳 - 革 欲 关 系 式 可 知 白 品目 过 程 z(4) 的 
谱 密 度 为 常数 o…, 即 
Stw) = oa， oo 所 贡 瓜 eco [2.22) 
另外 ,服从 于 正 态 分 布 的 白 蝇 声 过 程 称 为 正 态 (高 斯 ) 白 噪声 。 
以 上 有 关 标 量 自 品 声 的 概念 可 以 推广 到 向 量 中 。 如 果 一 个 六 维 向 量 随 机 过 
程 w(t) 满 足 
EC = 和 0 
Lviedey， wutt +Tr)l 一 开 |mwrzr+ri = estr) 
式 中 ,如 是 正定 的 常数 矩阵 ;60r) 是 Diras 图 数 ; 则 世人 (为 向 量 白 噪声 过 程 。 
2) 和 白 噪 声 序列 
自 咯 声 序 列 是 白 噪 声 的 一 种 离散 形式 。 根 据 傅 里 时 变换 , 白 噪 声 的 谱 密 度 为 
常数 , 即 


(2.23) 


Sufm) = 忆 Reriw 一 (2.24] 

式 中 ,只 《0 为 两 丙 不 相关 的 随机 列 | (| 的 自 相关 要 
RCI = ca28， 一 和 ,十 1, 土 2… (2.25) 

周 样 ,向 量 白 噪声 序列 ; 世人) 名 足 
人 一 昨 2 20 
cov|tpf 开 人 (下 二 7 一 下 (RICE 二 | 一 瑟 6 
式 中 , 丸 是 正定 的 常数 矩阵 ;& 是 Kronecker 符号, 即 
1，7=0 

合 / 一 0， 7 二 0 【2 .27》 


3) 表示 定理 

工程 实际 中 数据 所 含 的 噪声 往往 是 有 色 噪 声 。 所 少 有 色 噪 声 ( 或 相关 噪声 ) 指 
的 是 噪声 序列 中 每 一 时 刻 的 噪声 和 另 一 时 刻 的 噪声 是 相关 的 。 对 含有 有 人 色 品 声 的 
数据 需要 采用 新 的 辨 识 方法 才能 得 到 满意 的 辨识 结果 。 在 特定 情况 下 ,有色 噪 声 
可 以 用 白 噪 声 来 描述 ,这 就 是 表示 定理 所 区 前 述 的 问题 。 

表示 定理 ” 设 平 稳 噪 声 序 久 | ee 人) 的 谱 密 度 5.(o) 是 mw 的 实 国 数 或 是 cosm 
的 有 理 函 数 ,那么 必须 存在 一 个 汤 近 稳定 的 线性 环节 .如 果 该 环节 的 输入 是 白 品 声 
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序列 , 则 环节 的 输出 是 密度 为 S to) 的 平稳 噪声 序列 je 。 
定理 表明 ,有色 品 声 序列 可 以 由 百 喉 声 序 列 驱动 的 线性 环节 输出 来 近似 。 沪 
线性 环节 叫 作 成 形 滤波 项, 如 图 2.4 所 示 。 


和 师 声 |， 线性 系统 | 有 包 央 声 图 中 ,|w(A) 是 均值 为 零 的 白 噪 声 序列 ， 
1eCgP| (大 形 尖 波 名 ) | eof 1e(A 站 是 有 色 噪声 。 成 形 滤波 器 的 脉冲 传递 
函数 可 以 写成 

图 2.4 成 形 滤波 器 De 

一 Cfz TD) 
[CCz 三 ] 十 <c1 交 1 十 “… 十 Co 














(2.28) 


2.29 
1p(c) 一 工 + dg 1 二 -十 Cn ) 


且 Cs 和 (z) 的 根 都 在 * 平面 的 单位 圆 内 。 
2.4.2 自 了 噪声 的 产生 及 其 MATLAB 仿真 


如 果 在 计算 机 上 比较 经 济 的 产生 统计 上 理想 的 各 种 不 同 分布 的 白 噪声 序列 ， 
则 对 系统 辨识 仿真 研究 担 供 了 极 大 方便 。 为 了 简单 起 见 , 常 把 各 种 不 同 分布 的 日 
噪声 序列 称 为 殖 机 数 。 从 理论 上 讲 ,只 要 有 了 一 种 具有 连续 分 布 的 中 机 数 ,就 可 以 
通过 函数 变换 的 方法 产生 其 他 任意 分 布 的 随机 数 。 显 然 ,在 具有 连续 分 布 的 随机 
数 中 ,上 0,1) 均 匀 分 布 的 随机 数 是 最 简单 .最 基本 的 一 种 ,有 了 (0,.1) 均 匀 分 布 的 随 
机 数 , 便 可 以 产生 其 他 任意 分 布 的 随机 数 和 白 嗓 声 。 所 以 ,下 面 着 重 讨论 (0,1) 均 
匀 分 布 随机 数 及 ( -1 ,1) 白 噪声 的 产生 及 其 仿真 刘 法 。 

1) 《0,1) 均 匀 分 布 随机 数 的 产生 方法 

在 计算 机 上 产生 (0,1) 均 匀 分 布 随机 数 的 方法 主要 有 三 类 。 一 类 是 把 已 有 的 
《0,1) 均 匀 分 布 随机 数 放 在 数据 库 中 ,使 用 时 访问 数据 库 ,这 闫 方法 虽然 简单 但 十 
用 存储 空间 大 ; 另 一 类 是 物理 方法 ,用 硬件 实现 ;第 三 类 是 利用 数学 方法 产生 (0,1) 
均匀 分 布 随 机 数 ,该 方法 经 济 实用 ,主要 包括 乘 同 余 法 和 混合 同 余 法 。 下 面 讨 论 简 
单 实用 的 乘 同 余 法 。 

用 如 王 递 推 间 余 式 产生 正 整 数 序列 | zi 

并 一 Ar ifmod MD)， = 12)3， 《2.30) 

式 中 ,mod 为 取 M 的 余数 ,如 :M 为 2 的 方 蹇 , 姥 M= 关 ,为 上 >2 的 整数 ;大 
&=3, 刚 (mod 8) 或 不 三 8, 则 (mod 256), 目 4 应 取 适 中 的 侦 , 如 3<A<10; 初 值 
二 站 取 正 奇数 ,如 了 0 一 1 

再 令 





< -= 二， =1.2)3 (2.31) 
上 z 一 工人 9 “ 
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可 以 证 明 序 错 上 | 是 伪 随 机 数 序列 ;同时 还 可 以 证 明 伪 随机 序列 | 5 的 循环 周期 


达到 最 大 值 关 一。 


将 式 人 .30)7 和 2 ,311) 合 并 为 


式 中 , 初 入 为 和 = 过 


志 = 4&_1| (2.321) 


心 
忆 


2) (0,1) 殉 匀 分 布 随机 数 的 产生 仿真 举例 

例 2.1 利用 乘 同 余 法 , 选 只 =2,A4=6=8,M=2t=256, 递 推 100 次 , 采 
用 MATLAH 的 仿真 语言 (m 软件 ?编程 ,产生 (0,1) 均 匀 分 布 随机 数 。 

解 【 附 光 盘 上 的 该 程序 ;FLch2sixleglm, 可 直接 在 MATLAB 6.[I 下 运行 ,) 


中 编程 如 下 : 
上 6 Me=100 
ferk=1l:N 

和 三 贞 攻 2 


=15 M=259;i 有 初始 化 ; 
名 科 同 余 靶 递 推 1004 殉 开 始 
入 妇 和 z 分 剔 表示 国 和 桨 -1 


x=mod (xz2,M); 多 将 好 存 情 器 的 数 除 以 M, 取 余数 放 xl 中 ; 


WwW 二 XSDi 
太一 v1; 


XI 三 xl; 
加 =v]; 
end 


一 ww 


kL = 上 
驳 gTapbher 
k 一 1:Kk1; 


龟 涯 xl 存储 器 的 数 除 以 256 得 到 小 于 1 的 随机 数 放 vlL 中 ， 
闹 将 叶 中 的 数 仿 ) 存 放 在 矩阵 存储 器 v 的 第 上 列 中 ， 

物 以 :区 表示 行 不 变 . 列 随 递 推 镍 环 次 数 变化 ; 

双 抽 =- xl,xi 中 存放 第 ;时 刻 的 余数 ; 


铬 递 排 100 玖 乡 束 } 
红 该 谱 句 末 无 … ,实现 算 阵 存储 器 v 中 随机 教区 让 v2 中 
听 且 可 直接 显示 在 MATLAB 的 window 让 ; 


入 坚 图 ; 


Blotfkwskyvy ii 
xlabelt kk ，viabelfivitktlet 7 0- 均匀 分 布 的 随机 序列 ') 


从 程序 运行 结果 如 图 ?2.5 所 示 。 

全 产生 的 (0,1) 均 匀 分 布 的 随机 序列 。 

在 程序 运行 结束 后 ,产生 的 (0,1) 均 匀 分 布 的 随机 序列 ,直接 从 MATLAB 的 
window 界面 牛 拷贝 出 来 如 下 {u， 中 每 行 存 6 个 随 宙 数 ，za 07) 二 1，2， 13; 


六 三 112 
va 一 
0.0234 
必 ,7852 
心 .9023 


站 .8438 





心 ,1406 日 .3843 0.0820 避 .4922 女 ,9009 
性 ,72606 心 ,3750 间 .2378 0.3308 0.3164 
避 .4336 0.6094 避 .6680 属 .0234 1T.1406 
0.0820 0 .4922 心 .9609 0.7832 1.7266 


”3 加 ， 秒针 幸 识 琉 其 MIATLAB 售 趟 





.3730 0.237 避 属 .550U8 心 .,3164 口 .9023 
.0094 出 .6680 个.0233 0 .1406 .8438 
4922 0.9609 口 .7832 0.7266 0.3730 
3508 站 ,3164 ,9023 0 .4336 妨 ,6094 
日 .1406 避 .8438 性 .132 用. 4922 
,5852 0.7206 0.373 0,257 口 .530 蚊 
59023 0D.4336 0.6094 0.6680 属 ,0234 
8438 夏 . 和 2 .4922 .9609 心 ,7832 
.3730 .2378 恬 .3 心 .3104 避 .9023 了 
0 .6680 0.0234 0.1406 口 .8438 
0.9609 0.78352 0.7266 0.3730 
人 .5508 站 .了 3164 0.9023 0.4336 站 .6094 
0.0234 站 .1406 如 ,843 .0820 


10, 均匀 分 布 的 随 桃 序列 


区 
全 
kt 
Wi 
下 


后 *， 
瑟 
人 
匡 


[aa 

心 

同 

| 

0 

号 

1 =， 
es 
让 





图 2.5 采用 MATILAB 产生 的 各 ,1 均 邹 分布 的 随机 序列 图 


3) 白 品 声 产生 举例 

例 2.2 利用 乘 同 余 法 , 仍 选 尽 =2,A=6 大 =8,M= 和 =256, 递 推 100 次 ， 
采用 MATLAB 的 仿真 语言 编程 ,产生 ( - 1,1) 均 勾 分 布 的 白 品 声 。 

解 ”中 只 要 将 产生 的 (0,1) 均 匀 分 布 的 随机 序列 的 程序 稍 加 改动 ,将 产生 (0， 
1) 均 匀 分 布 的 葡 机 数 统 统 减 去 0.5, 相 当 于 将 原 和 随机 序列 图 的 横 坐 标 向 上 平移 
0,5, 原 随机 序列 变 成 了 ( -0.5,0,.5) 的 白 噪 声 ,然后 乘 以 存储 器 了 中 预 置 的 系数 ， 
便 可 得 到 任意 幅 值 的 白 品 声 ,这 里 取 =2 ,得 到 了 产生 ( -111) 均 匀 分 布 的 白 唆 声 
的 程序 如 下 ! 附 光盘 上 的 该 程序 :FLeh2sjxleg2.my): 


上 =6; xD0=li f= 2; N=100: 向 厅 始 化 ; 
xz=1;，M= 253; 
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icrk= 1: N % 习 同 余 法 递 推 100 殉 ! 
包 一 点头 吉 ; 钊 分 别 用 闻 和 芭 表 示 关 和 Xi-1; 
xz 一 mod (x2,MD); % 取 闻 存储 器 的 数 除 以 M 的 余数 放 xl 中 
y1 = xl 56 包 将 x] 在 侍 器 中 的 数 除 以 256 得 到 小 于 1 的 随机 数 放 v1 中 ; 
wkEJ=fvl0.S)*D 及 将 v] 中 的 教 (5 乱 去 0.5 再 磁 以 存 情 吕 { 中 的 系 教 ， 
和 存放 在 下 阵 存 情 内 "的 第 一列 中 ; 
台 = xl  % -1= x] .xl 中 存放 第 i 时刻 的 余数 ; 
一 vi co 旨 递 推 100 次 结束 ; 
v2=Yv 铅 该 语句 未 无 '; ,实现 矩阵 存 情 跟 * 中 随机 数 放 在 凤 中 ， 
党 旨 可 直接 显示 在 MATILAB 的 window 引 
k1=K; 
入 grapher 龟 绽 图 ; 
二 ]:kl; 


plotfk vvk wy ri 
xlabe 业 ，ylabelftlv itktle( tf 1, +1) 均 名 分 布 的 闫 蝇 上 声 


名 程序 运行 结果 如 图 2.6 所 未。 


f1+0D 均 与 分 布 的 户 是 声 





图 2.6 有 果 用 MATLAB 产 生 的 { 一 1, + 了 均匀 分 布 的 白 曲 声 序列 


国产 生 的 ( -1,1) 均 匀 分 布 的 白 噪 声 序列 。 
在 程序 运行 结束 后 ,产生 的 ( ~- 1,1) 均 匀 分 布 的 白 噪声 序列 ,直接 从 MATLAB 
的 window 界面 中 搁 贝 出 来 如 于 (ma 中 每 行 存 6 个 随机 数 wz (大 ) 三 1 2， 
13; 下 二 126): 
v2 一 
-0.9531 -0.7188 0.6875 -0.8359 -0.0156 0.9219 
0.3703 0.4531 一 10.2500 一 0.4844 0.1016 一 0.3672 


3 


系 搞 六 识 及 -其 MIATLAB 仿 识 





0.8047 一 0.1328 .2188 0.3359 一 0.9531 一 0.7188 
.6875 一 0.8339 一 0.0156 避 ,9219 口 .3703 和. 31 
-0.2300 一 0,4844 0.1016 一 0.3672 0D.8047 一 站 .1328 
0.2188 0.3359 一 0.9531 一 0.7188 0.68753 一 0.83359 
一 .8136 0.9219 0.5703 0.4331 -0.23500 一 0.4844 
0.1016 一 0.3672 0.8047 一 0.1328 D.2188 晶 .333 
一 0.95331 一 0.7188 0.6875 一 0.833D -0.0136 属 .9219 
收 .5703 几 ,4331 一 0.2300 一 0.4844 0.1016 一 0.3072 
0.8047 一 .1328 修 .2188 0.3359 一 0.9331 一 0.718SY 
站 6873 一 全 .8359 一作 .0136 0.921 纪 站 .35703 心 .4331 
一 蛋 .2500 一 站 .4844 人. 1016 一 0.3672 10.8047 一 人 .132g 
,2188 0.3339 一 0.9531 一 .718 名 0.6873 一 人 .8359 
一 心 .0136 避 .92 1] 0.3703 0.4531 一 0. 的 风 一 0.4844 
0.1016 一 站 .3672 0.8047 一 0.1328 人 .2188 0.3339 
一 人 .9531 一品 .7188 0.6873 一口,8339 
显然 ,只 要 在 例 2.2 程序 的 初始 化 部 分 中 给 六 = 300, 了 =6, 运 行程 序 就 可 以 


得 到 如 图 2.3 所 示 的 (-3,3) 的 白 曝 声 过 程 。 
当然 , 正 态 分 布 的 随机 数 是 我 们 最 关心 的 一 种 。 在 已 产生 的 (0,1) 均 习 分 布 的 
随机 序列 的 基础 上 ,可 以 推出 正 态 分 布 的 随机 数 表达 式 如 式 (2.33) 所 示 。 


生 
2 与 -NA2 


f 一 上 
1? 二 mr (2 .33) 


式 中 ,7 为 (po2) 正 态 分 布 的 随机 数 。 当 $ 为 (40,1) 均 匀 分 布 的 随机 数 时 , 则 


mr 二 王 1 生 | = ] 868 = 172 (2.34) 
荆 上 
cy 一 variEl = [| 一 85de | = [1z12]: (2.351》 
式 中 ,下 1 是 后 的 均值 ivarf 8 是 上 的 方差 ; 当 N=12 时 , 土 式 可 简化 为 
8 = 站 (2 一 6) (2.36) 


式 (2.36) 为 统计 特 性 较 理 想 的 正 态 分 布 的 随机 数 表达 式 。 


第 2 章 认识 理论 基础 及 十 典 赫 识 方法 33 ， 








2.4.3 伪 随 机 信号 产生 到 MATLAB 坊 真 举例 


1) 基本 概念 

从 辨识 的 概念 可 知 , 若 系统 的 模型 结构 正确 ,系统 模 现 的 辨识 精度 直接 通过 
Fisher 信息 亏 数 和 矩阵 依 顿 于 输 和 人 玉 确 定 。 因 此 ,合理 的 选择 系统 办 识 的 输入 信和 号 
是 保证 辨识 精度 的 重要 环节 。 前 面 已 经 讨论 了 白 噪 声 的 产生 。 但 工业 设备 ,如 峰 
门 . 铅 车 ,提升 机 等 不 可 能 按 白 噪声 的 变化 动作 。 而 线性 移 位 寄存 器 序列 (M 序 
列 ) 是 一 种 很 好 模拟 工业 设备 动态 运行 中 的 因 识 输入 信和 号 ,AM 序列 上 共有 接近 白 只 
声 的 性 质 ,因此 称 为 切 随 机 信和 号 。 

2) 用 移 位 寄存 器 产生 M 序列 

例 2.3 四 级 移 位 审 存 器 产生 M 序列 的 结构 如 图 2.7 所 示 。 








图 2.7 四 级 移 位 寄存 器 产生 导 序列 的 结构 图 


图 中 ,中 表示 模 2 和 ( 异 或 ) 运 算 ,C Ca G 和 心 表示 四 个 移 位 寄存 器 ,zivra zi 
和 z4 分 别 表 示 各 移 位 寄存 器 的 输出 ,z4 的 输出 为 产生 的 M 序列 。 四 级 移 位 害 存 
器 的 连接 方式 可 用 (2 .37) 表 示 。 

了 (并 十 了 ) = if( 雪 ) 

了 3 下 十 了 ) 一 了 2 二 ] 

字 术 二 十 ]) = 工 3 人 到) 

交 必 下 十 让) 二 卫 抑 下) 什 ) 4( 天 ) 
从 而 可 见 , ri 第 (&+1) 时 刻 的 状态 由 zs 和 zs 第 & 时 刻 状 态 的 异 或 运算 结果 决 
定 ; zy 第 (+1) 时 刻 的 状态 由 zt 第 上 时 刻 状 态 决 定 ; z3 第 (+ 了 时刻 的 状态 由 
za 第 到 时 刻 状态 决定 ; z4 第 (R+T) 时 刻 的 状态 由 z3 第 上 时刻 状 态 决 定 。 设 置 初 
始 状态 为 1010 ,在 移 位 吕 冲 CP 着 用 下 , 害 存 器 各 组 状态 的 变化 如 表 2.1。 


(2.371) 


,， 旨 ， 系统 办 识 在 其 MATIAB 仿真 








表 2.1 站 人生 凡 序列 的 工作 状态 

















该 M 序列 可 表示 为 
ME 一 王国 于 四 贡 的 王国 并 生 泣 由 浊 四 和 半 生计 中 二 四 
(2.38) 
式 中 , 共 表示 状态 在 第 二 位 为 1; 辐 表 示 模 2 和 ( 异 或 )。 该 M 序列 有 以 下 特点 : 
(1) 导 序 下 的 各 于 长 度 为 No 人 多-1=15, 其 中 六 为 寄存 器 的 个 数 ; 


(2) 逻辑 为 1 的 次 数 为 人 -2v-1- { Ni +T1)72; 


(3) oo ai ICON_D 

(4)“ 游 程 "的 特点 。 对 四 级 移 位 寄存 器 产生 X 序列 而 言 , 每 周期 有 15 位 
(bit)。 状 态 连续 出 现 的 段 称 为 * 认 程 ,该 15 个 Ht 分 为 8 段 。 其 中 "游程 和 ?1 
游程 各 有 4 个; 长度 为 1 个 bit 的 有 4 个 ,起 总 段 数 的 172; 长 度 为 2 个 bit 的 有 ? 
个 , 占 总 段 数 的 174; 长 度 为 3 个 bit 的 有 1 个 (还 辑 0), 占 总 自 数 的 178; 长 度 为 4 
个 hit 的 有 1 个 ( 还 辑 1) , 占 总 段 数 的 178。 

3) 用 MATLAB 软件 实现 移 位 寄存 器 产生 邓 序列 

例 2,4 现 仍 以 四 级 移 位 寄存 器 产生 M 序列 为 例 ,在 实际 中 , 常 把 M 序列 的 
逐 辑 0' 和 逮 辑 :全 变 搞 成 'a 和 - 2 的 序列 ,这 里 取 a =1 ,用 软件 实现 。 

解 ”全 编 程 如 下 ( 附 光盘 上 的 该 程序 :FLch2sjxleg3.my): 


XI=-12-03=1 4=0， 和 % 称 位 寄存 内 输 人 芷 初 态 (0101)， 


mm= 60; 入 团 M 序列 总 长 度 叫 值 ; 
or 一 二 :ia 名 开始 和 牢 环 
本 = 到 人 = TY2= 关 ; YL1=X:， % Yi 为 移 位 寡 存 器 各 级 输出 ， 


双 在 移 位 之 前 先 将 各 自 芍 箱 人 和 传 给 输出 ; 
了 4=Y3 人 二 如 | X2 二 了 1 册 实现 移 位 寡 存 磊 的 过 接 方 示 ; 


第 2 章 疮 识 理 论 基 础 及 十 由 侠 识 方法 ”3 委 
XL=xcortY3,Y4) 多 媒 或 运算 ,实现 xlfk+ TD)= 芭 (中 xd 
YY4= = 名 将 输出 阅 态 转 换 成 … 上 态 ; 
U(= -]; 
Se 
ULCD = Y4; 
end 翅 转 换 铺 惠 ; 
end % 名次 循环 结束 ; 
M= 
% 绘 图 
订 =i 
kk 一 1; 
HotkK LE Urx 
xjabelf 7 
ylabelfM 序列 人 
titlet 称 人 在 寄存 器 产生 的 M 序列 六 
外 程序 运行 结果 如 图 2.8 所 示 。 


移 位 寄存 器 产生 的 4 了 列 


1 

0.8 

了 .三 

0.4 

0.2 

六 -62 

-04 

-046 

-08 

0 六 “20 3 娩 30 全 


图 2.8 软件 实现 的 移 位 寄存 器 产生 的 W 溯 列 图 


多 用 软件 实现 的 移 位 寄存 器 产生 的 财 序列 ,在 程序 运行 敌 束 后 ,产生 的 
(-1,1) M 邮 序列, 直接 从 MATLAB 的 windcw 界面 中 拷贝 出 来 如 下 (M 中 每 行 存 
10 个 数 人 =1~10), 在 程序 中 置 M 序列 总 长 度 值 呈 三 扣 , 所 以 共 如 个 数 ， 
TI)= .26 一 1,2，…,10): 

RMT= 
-1 1 -ll 1 1 1 1 -1 -1 -=-1 
1 -1 -llL 1 1 -1 1 -1 1 1 
1 1 -ll -1 -1 1 -1 -1 1 1 


凶 列 
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在 实际 中 ,可 根据 所 需 M 序列 的 周期 长 度 的 不 同 , 选 择 移 位 寡 存 第 的 级 数 
N, 上 只 要 适当 的 连接 其 结构 , 便 可 以 得 到 满意 的 Wi 。 在 其 结构 中 ,决定 ri 第 &+1 
时 刻 状态 的 第 & 时 刻 状态 异 或 运算 结果 是 关键 。 下 面 将 常用 的 N 组 产 咎 M 序列 
移 位 寡 存 器 连接 方式 列 于 表 2,2。 
泰 2,2 六 级 产生 M 序列 移 位 寄存 器 的 连接 方式 





周期 长 度 =2> -1 状态 异 或 运算 寄存 器 的 级 数 

了 区 改天 十 1 一 zl 中 外 相关 ) 四 
15 工 放下 十 上 ) = 53{ 丰 ) 全 4 二) = 
31 光 放 天 十 1 一 -23t 呈 rsl 志 AN 
63 工区 下 十 1) = 下 5 下 1 全 Jr6[ 直 ) 和 全 二 
127 1 二 十 上 一 工 克 到 jrzf) = 了 
255 开 民 二 十 1 = 工 2 二 Ji 二 JrT3( 开 ) AN 8 
511 1 中 十 1 一 -5 二) 下 ef 下 N=3 
1023 了 区 下 二 上) 一 开 7) 下 io 天) NI 

2047 工 上 民 下 十 上 = 5 和 下 ) 下 RE) -1l 


任何 M 序列 均 具 有 移 位 相 加 的 性 质 。 除 了 上 述 用 软件 直接 实现 实用 的 六 级 
移 位 寄存 器 M 序列 外 ,还 可 以 将 N 级 移 位 寄存 器 M 序列 (如 表 2.1) 各 级 移 位 裔 
存 器 的 状态 任意 组 合成 实用 的 和 序列 ,如 式 (2.39) 所 未。 

有 TCR 二 人 1) [2.39) 
式 中 ,s2 为 0 状态 ,系数 训 和 周期 AN, 的 循环 次 数 有 关 , 可 表示 为 
1， 天 一 1)35 
10 二 4 
， p， 435， 
RISE 为 由 状态 01 .寄存 青 避 的 输出 zi) 和 寄存 器 Cd 的 输出 zx4(k) 的 在 每 个 
采样 点 上 的 状态 模 2 和 ( 异 或 } 运 算 形 成 的 序列 。 显 然 , 对 于 式 (2,39) 也 可 以 采用 
编程 用 软件 来 实现 。 


(2.40) 


2.5 古典 辨识 方法 


古典 (经 典 ) 辨 识 方法 [ 亦 称 为 非 参数 辨识 ) ,在 古典 控制 理论 中 ,线性 系统 的 动 
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态 特性 通常 用 传递 隔 数 G{s) .频率 啊 应 CUjia) ,脉冲 响应 gf 或 阶 跃 响应 天 (0) 
来 表示 ,后 三 种 为 非 参数 模型 ,其 表现 形式 是 时 间或 频率 为 自 变量 的 实验 曲线 。 对 
平 系统 施加 不 同 的 特定 的 实验 信和 号 ,测定 出 相应 的 输出 ,可 以 求 得 这 些 非 参数 模 
型 ， 经 过 适当 的 数学 处 理 ,它们 艾 可 以 转变 成 参数 模 卉 , 即 传递 妆 。 

获取 非 参数 模型 的 主要 方法 有 : 阶 茎 啊 应 法 、 脉 冲 响 应 法 .频率 响应 法 及 相关 
分 析 法 等 。 下 面 先 介绍 系统 办 识 的 持续 激励 信号 自 相 关 函 数 。 


2.5.1 M 序列 自 相 关 函 数 


系统 辨识 中 , 常 把 移 位 寄存 器 产生 的 M 序列 的 昌 辑 0 和 逮 辑 1 变换 或 w 和 
-za 的 序列 作为 系统 的 激励 信号 。 在 M 序列 表 2.1 中 若 从 号 =4( 时 钟 的 第 4 周 
期 ) 算 起 (或 者 将 4 级 移 位 寄存 器 的 初始 状态 置 成 1111) ,将 4 级 移 位 表 存 器 输出 
的 逻辑 0 和 有 逻辑 1 变换 成 ea 和 -ae 的 序列 ,如 图 2.9 所 示 。 








] 1 1 001IT01ILI0O01D1I1I11 
图 2.9 4 级 对 序列 变换 成 幅 值 为 和- a 的 序列 


这 种 变换 关系 可 表述 为 
AM = 人 CT 一 223| (2.41) 
或 
Mi) = evexp[jirr]，j=v 一 1 【2.42) 
式 中 ,z*; 是 取 0 或 1 的 M 序列 元 素 ; M(i) 是 取 = 或 -a 的 M 序列 元 素 。 显 然 ， 
在 这 种 转换 关系 下 , |MI(a)| 的 乘法 群 (CMIOR)MIRT+T7) 和 1z4 的 加 法 群 
(rz 中 zk) 具有 同 构 关 系 { 即 两 者 在 相同 初始 状态 下 运算 结果 相同 )。 
根据 自 相关 函 数 的 定义 ,MY 序列 的 自 相 关 函 数 可 坟 按 下 式 计 算 


1 Tar 
站 MA T z)di [2.43) 


式 中 ,Mt) 是 幅 值 为 或 -a 的 M 序列 ;At 是 位 移 脉冲 周期 (时 钟 周期 ), 上 式 的 
离散 形式 写成 


Ragfz) 一 


” 刘 ， 和 尔 主 办 识 及 其 MATLAB 仿真 





有 RM) = 站 站 MAM(E+ (2.44) 
六 8 


根据 上 述 同 构 关 系 式 (2.41), 显 然 , 当 ==0 时 ,Ru = ai 当 开 = 开关 生 
Ni -1) 为 整数 时 ,出 有 


1 ea 网 
Rurfr) 三 工 SMCEJAM 人 +T = 二 一 一 (2 .45) 
pico 1 
当 -AfsrsAl 时 
2|zle* 由 本 
2 22 Op 1 < 
Rurfr) = 己 Ar 2 避 1 NA ,jz 之 A (2.46) 


因此 ,周期 为 NAz 的 M 序列 的 和 目 相关 函数 可 妇 纳 为 


[ Ar 二 TI 
2 市 - 加 
一 一 一 一 4 去 
|: 由 ， 一 上 由 去 -TS 上 


表 rtzr) 一 ， : (2 .47) 
色 


二 N At<r<t 一 Ta 


2.5.2 逆序 列 


1) 道 M 序列 的 产生 

从 谱 密度 角度 分 析 ，M 序列 的 谱 密 麻 是 以 [2ra2N TAN [sintoarv2)7 
(waAz 2)] 为 包 络 线 的 线条 谱 !421 ,在 w=0 时 ,周期 为 Jv 的 M 序列 的 谱 密 度 可 朱 
述 为 

So(w] = 2ra27N2 (2.48) 

谱 分 析 表 明 , M 序列 含有 直流 成 分 ,造成 对 辨识 对 象 的 峥 干扰 。 增 加 AN 可 减 小 
该 直流 成 分 。 闭 M 序列 可 以 达到 这 个 目的 。 它 是 一 种 比 M 序列 更 理想 的 伪 随 
机 码 序 列 。 在 M 序列 基础 上 生成 送 M 序列 的 方法 很 多 ,并 且 很 容易 实现 ， 下面 
举例 说 明 。 

例 2.5 在 表 2.2 中 ,4 级 称 位 寡 存 器 产生 的 M 序列 ,初始 状态 为 "1111  ， 
mm =15, 取 邮 序 列 , 即 zx4(&) 的 状态 ;S() 是 周期 为 2bit, 元 素 取 0 或 1 的 方 波 序 
列 ; 可 用 (2.49) 生 成 送 M 序列 ,并 将 产生 过 程 列 于 表 2.3。 

硝 2.3 呆 序 列 与 方 波 复 售 生成 送 Mf 库 列 | RMT 上 过 程 


MT 1 1111000100110101 1 1 1 
SftJ |101010101010190 1 0010 1 
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EM 一 MORE SC (2.49) 
可 见 ,该 道 M 序列 | RD) 是 M 序列 MG 序列 和 方 波 1S()i 在 每 个 位 上 的 
模 2 和 运算 结果 。 但 该 道 M 序列 jiJAM{tE 刘 的 周期 为 2 =30。 
例 2.6 在 4 级 移 位 奇 存 器 产生 的 M 序 州 表 2.1 中 ,=15, 从 时 钟 中 =4 
算 起 ,分别 取 M 序列 的 zf 和 xi) 序列 ,再 利用 (2.39) 式 RAT(E) = 大 中 
zk)zr4(t) 生 成 道 M 序列。 根据 (2.40) 分 析 ,5 =01,5= ii=1,3, 5 …， 
即 下 “项 只 有 在 第 奇数 个 循环 周期 上 的 第 2 位 出 现 , 即 六 =2,32,… 时 为 工 其 余 位 
全 为 0。 将 产生 过 程 列 于 表 2.4。 
表 2,4 JI) = 和 :si 人 中 xs 下) 生成 道 MT 序列 过 程 


TPRETSTSTETSTTETDT 
1 二 1 = 


本 四 枉 匠 
1 1 
笑 改 


上 两 例 生 成 的 赣 M 序列 均 使 M 序列 的 周期 增 大 到 2 ,从 而 使 其 直流 成 分 
大 大 减 小 , 若 将 道 财 序列 的 逻辑 0 和 逻辑 1 变换 成 e 和 - ea 的 序列 ,可 以 作为 系 
统 辩 识 中 一 种 理想 的 激励 信和 导 。 因 此 , 道 M 序列 在 辨识 中 应 用 三 证 。 

2) 道 M 序列 的 性 质 

由 此 不 难看 出 , 赣 M 序列 有 如 下 性 质 

(1) 道 M 序列 和 ME) 的 周期 N1 是 原 序 列 jA(E) 周 期 的 两 倍 , 即 

N3 = 2N， (2.50) 

(2) 如 果 将 道 M 序列 | Ad (ze) 的 逻辑 状态 0 换 成 +a ,逻辑 状态 1 换 成 一 a， 
则 在 该 序列 中 , + < 和 - < 两 个 电 平 出 现 的 频率 相等 ,因此 ,该 序列 在 Ne =2Ne 内 
的 平均 值 为 零 ,在 这 方面 类 似 于 白 噪声 。 

《3) 道 M 序列 ACE)E 和 原 序列 是 不 相关 的 。 


2.5.3 相关 分 析 法 频率 响应 辨识 





























































1) 基本 概念 
在 古典 控制 理论 中 , 系统 的 频率 响应 CUjw) 表 示 为 
，、_ 了 (0oa) 
全 (jo) 三 RUisy = Re(w) + Imloy) 《2.51) 


式 中 ,Re(w) ,Im(w) 分 别 表示 频率 响应 的 实 频 特性 和 虚 频 特性 ; CUjej,Ytjw) 分 
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别 表 示 系 统 输 人 信号 和 得 出 信和 号 的 和 傅 里 叶 变 换 , 可 写成 
(jjo) 一 | zaoDerd; 一 | 下 (Jecoseotdit + 2 Sinetdd 【2 ,52 1 


YUeo) 一 | Dandt = | 人 ECeOSGt 对 十 | 畏 3 人 sinootd 【2 .331 


确定 (线性 定常 ) 系 统 的 稳 态 时 间 响 岂 c( 1)、 频 率 响应 G (jio) 和 输 人 信号 

U(jo ) 之 间 的 关系 可 撕 述 为 
cD) =| COojeiedo = 二 _G(io)UGo)ereao (2.54) 

在 生产 实际 中 ,频率 响应 用 解析 方法 直接 求解 太 妹 琐 ,很 难 找到 。 于 是 用 频率 特性 
图 示 法 。 频 率 特性 图 示 法 主要 有 , 极 坐 标 图 (或 奈 购 斯 特 (Nyquist) 图 ); 对 数 坐标 
(或 伯 德 (Bode) 图 ); 另 外 ,闭环 频率 特性 图 示 法 有 :等 M 加 和 等 N 图 , 尼 柯 尔 其 
图 。 大 家 熟知 ,在 任何 一 本 《自动 控制 源 理 》 书 上 都 有 -一定 的 简 幅 讨论 频率 特性 图 
的 绘制 方法 。 换 句 话说 ,系统 的 频率 响应 利用 古典 控 制 理论 频率 特性 图 示 法 可 以 
方便 的 得 到 。 

最 小 相位 系统 的 传递 函数 通常 可 以 用 一 些 基本 环节 描述 为 


K[ (Ts+T) ) [CT 2T2ieae + 了 
GE) = 一: 一 -一 一 一 一 一 (2.55) 
wIT(Tis -DJTC +2Teker + 


从 而 可 见 ,如 果 用 实验 法 测 得 了 系统 的 频率 响应 ， 系统 的 Nyquist 曲线 或 Be 图 ， 
可 依据 在 不 同 频率 下 Nyquist 曲线 的 实 频 特 性 Ref w) 和 虚 频 特性 In(w) 直 接 写 出 
系统 的 开 环 频 率 响应 CUja) ,或 依据 在 不 同 频 率 下 Bode 图 的 幅 频 特性 Lo 和 相 
频 特 性 &w) 可 直接 写 出 系统 的 开 环 传递 末 歼 CGIs)。 再 将 传递 函数 变 成 频率 响 
应 Go), 即 
G(io) = CGt5)| -io {2.56) 
2) 相关 分 析 法 频率 响应 辩 识 
上 述 频 率 响 应 法 只 有 在 信 噪 比 很 高 的 情况 下 才 有 效 。 然 而 在 工程 实际 中 , 系 
统 输 出 中 含有 测 蕙 曝 声 如 图 2.10 所 示 , 获 得 的 数据 总 是 含有 了 曲 声 ,相关 分 析 法 可 
有 效 的 解决 频率 响应 辨识 问题 。 图 中 ,系统 的 输 人 、 输 出 分 别 为 e( 后 和 yt)5 测 
量 输出 和 测量 品 声 分 别 为 zx( 贡 和 让) 
相关 函数 的 定 尽 : 
Re = lim 于 | =(oDatt 一 T)dz 
可 (2.57) 
| Rue(r) 一 jim 村 (一 瑟 )d 
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图 2.10 系统 输出 中 含有 测 其 噪声 


其 离散 形式 写成 


zft)att 一 rr) 


| 上 虐 
忆 (r) 工 之 


< - (2.S8) 
R。 - 子 w(Dat -=) 
式 中 ,R (rz) 指 系统 的 输入 的 自 相关 函数 ;R(r) 指 系统 的 输入 和 输出 的 互相 关 
函数 ; 节 相关 函数 是 时 间 为 频率 w 的 函数 , 即 工 - 2r/w。 
在 图 2.10 中 , 设 噪声 zw (ti) 是 均值 为 零 的 自 噪 声 ,其 相关 冰 数 为 R。(r) = 
528(r) , 当 输 和 信号 为 正弦 波 w( 站 = Asnar 时 ,系统 的 输出 稳 态 相应 可 表示 成 


本 


xfi = > Bisinfkot 十 氏 ) + 人 (2.59) 
在 时 间 工 =2rrxefan 为 整数 ) 区 打上 ,计算 = 与 snz 在 r=0 时 的 互相 图 数 


1 全 ， . 
和 全 民 srosinestD) 二 了 | gf ysSjinezdt 


有 PrT 2 有 5 并 
二 守 | sinf out 二 有 JsSineotdt 十 >， 寺 | sinf gccz 十 衣 )sineotdi 
了 下 = 了 2 了 .0 


工 
十 二 | JSineutdz 


了 .0 
2 十 上 2 十 了 3 【2.60) 
由 于 了 =2zmrvo ,利用 三 角 函 数 的 性 质 , 可 以 推导 出 
开 1 王 六 Bicosb， (2.61) 
及 
fa = 0 (2.62) 


当 了 个 充分 大 时 , 即 工 不 再 是 2rzo 的 轿 倍 数 . 式 (2.61)7 和 式 12.62) 仍 近似 成 立 。 
在 式 (2.60) 中 ,由 于 73 是 白 噪 声 ww{t) 的 函数 ,因此 13 是 随机 量 , 显 然 由 于 

at 的 均值 下 [zf =0, 所 以 下 1Tsl =0。 考 虑 到 随机 过 程 的 自 相 关上 因数 

R。(D 2) 只 与 时 间 差 (i2 - 旺 ) 有 关 , 而 与 辣 和 z 的 值 无 关 , 因 此 ,有 的 自 相 关 元 


数 可 写成 


-- = ru 一 ~ - -- - 
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尺 ) 《T) 一 及) ， 【ta 一 t) = E|[ 守 矿 zf)sirtcot1di | 二 at Jsirleuzzdz | 
风 TJ0 1 1 L 了 J0 了 了 | 


- 二， sinocdr sineoto 杞 ft)yrofta) dta 





- 5 sineot1ddt sinaag28(t 一 下 )dt2 
2 0 in2mwT 
一 了 Sin at1dt1 一 3 一 本 | (2.63) 
式 中 ,cz 为 曲 声 ze( 妆 的 方差 , 它 可 以 写成 的 形式 
af(r)》 = varl 训 人 引 | = 有 0) 一 瑟 和 oo 人)1 [2.64) 
在 式 {2.63) 中 , 当 工 =2zrvaw 时 , 则 
2 
尽 人 拉 一 上 二 这 (2.65) 


显然 ,只 要 积分 周期 了 充分 大 时 ,Ts 的 自 相 关 末 数 就 赵 于 零 。 可 见 , Js 相对 于 了 
来 说 完全 可 以 忽略 ,因此 式 42.60) 可 简化 为 


= ARouus(0) = Bicosb (2.66) 


依 此 类 推 , 在 时 间 了 = 2rmxufr 为 整数 ) 区 间 上 ,计算 >( 门 与 cos 在 r= 站 
时 的 互相 函数 


了 工 
2 人 心 民 seesoeO) = 了 |， Z 人 Jeosootdz 
了 全 . 记 亲 ， 
= 村 sinf mg 十 太 jcoserdt 十 2 了 | Sinf oz 二 订 7cosedd 


1 raceasaaa 
本 08 


会 FI + Ta2 十 43 《2.67) 
间 理 , 当 积 分 周期 工 充 分 大 时 ,可 推导 出 
1 
二 一 sinb 
了 : 一 0 
四 演员 
衬 f1 sin2 sn2s 了 T]、 ao 1 


Ti = 人，. 五 | = 0， 有 ， [za 一 呈 )》 二 了 


入 全 Riiaosee 人 人) 一 祁 Bising 《2 .69) 
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因此 ,过 程 的 频率 响应 估计 可 以 写成 
1cdjol= 卫 = 工 V 王 让 训 


所 占 
《2.70) 


CUo) = 9 = amtan 二 


Relw) = 
《2.71) 


Imlaw) = 


式 中 ,4 为 系统 和 输 和 人 信号 的 幅 值 。 媒 合式 (2.70) 和 (2.71) ,系统 的 频率 响 庶 估计 
也 可 以 写成 
Gao)= 16io)lZCdo) = 蒜 Vs 直 有 arctan 关 
补 5 
了 Z。 了 Zr 
FE 
从 和 而 可 见 , 在 系统 输入 主 豆 信和 号, 即 stt) = sinet 时 ,roft) 为 白 噪 声 ,系统 的 
频率 啊 应 悄 计 求法 是 :只 要 先 分 别 按 式 (2.66) 和 人 2. 的 ) 计 算出 互相 关 郴 数 二 和 
z_, 描 后 按 式 (2.72) 求 出 所 需要 形式 的 频率 响应 。 


2.5.4 相关 分 析 法 脉冲 响应 辨识 
1. 脉冲 响应 辨识 的 概念 


脉冲 响应 是 在 理想 脉冲 输入 作用 下 过 程 的 输出 响应 。 考 典 到 工程 上 时 间 输 人 
为 埋 想 脉冲 是 不 可 能 的 ,因此 通常 采用 抢 形 脉冲 输入 。 当 抑 形 为 冲 的 宽度 比 系统 
的 过 滤 时 间 小 得 多 . 且 矩 形 脉冲 的 面积 等 于 1 时 ,过 程 的 输出 可 近似 为 脉冲 啊 应 。 

当 系 统 存 在 噪声 时 ,利用 相关 分 析 法 辨识 系统 的 脉冲 响应 可 以 得 到 较 理想 的 
效果 。 

利用 相关 分 析 法 状 识 系统 的 脉冲 响应 的 基本 原理 如 图 2.11 所 示 。 
图 中 ,xf(5) 是 均值 为 零 的 噪声 ,其 相关 晒 数 为 Rukr)= ostr)i2 人 tt 是 过 程 与 模 


型 的 输出 误差 , 它 与 过 程 输出 =( 世 和 模型 输出 21) 的 关系 为 
宝 (FE < 人) 一 交 () {2.73) 


(2.72) 





= Rekw) 十 Tanfomy) 一 


式 中 
#(z) = | go)zt _ 98 (2.74) 
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图 2.11 脉冲 响应 辨识 示意 图 


考虑 如 下 淮 峙 函数 

J = 和 了 | 二 (edz (2.75) 
式 中 ,了 为 积分 周期 。 现 在 的 任务 是 根据 系统 的 输入 输 出 数据 ,确定 模型 的 脉冲 
响应 gz) ,使 误差 准则 函数 了 = min, 即 需要 解决 准则 郴 数 的 极 小 化 问题 。 综 合式 
[2.73) 一 (2.75) ,准则 函数 为 


-四 划 [zD- 人 elovt -oac]a {2.76) 


这 是 一 个 典型 的 变 分 问题 。 
设 g(C8) = 有 (0 时 ,准则 画 数 了 达到 极 小 值 , 必 要 条 件 是 
Baj [中 (6 + agefe) ] 
aa 
式 中 ,名 (9) 是 不 为 零 的 任意 小 波动 画 数 ; 是 标量 。 
考 由 到 式 {2.76), 式 (2.77) 展 开 为 
3aJ[8(C8) + age 的] 


磋 下 由 局 放 


= 小 [2.77) 





]TH 
一 站 


= 四 于 | 和 地 | [ze) -| 8) + wagif 人 人 一 9)d6] di:| 
-ia{- 计 外 | zz) -| BO)utz - 9)48]| ge(6)z(t - 0)d8| dt -0 
(2.78) 


为 了 不 引起 混 需 , 先 将 上 式 的 中 括号 外 | gu(g)u(t - 6)d8 的 积分 变量 9 换 成 ， 
然后 变换 积分 次 序 , 则 有 
交 _ 1 字 s 
六 器 仁 六 [xp -set -oa -ad 








ar = 用 





{2.79) 
由 于 有 (zz) 是 不 为 零 的 任意 小 波动 函数 , 则 有 
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种 (| 寺 相 [ze so)a0t- 9dglt- ad =0 (2.80) 


于 
[地 中 (ozte 一 cd 


= 上 各 (emule-pdz|de (2.81) 


震 设 系统 的 输 人 给 出 数据 是 平稳 的 各 态 骨 历 的 随机 过 程 , 则 上 式 的 右 侧 中 插 号 里 
的 内 容 为 输入 的 自 相 关 困 数 ,而 上 式 的 左近 为 输入 输出 的 互相 关 图 数 , 即 


民 ， 一 兽 ( 地 枚 =(patt 一 T)dE 


= EDRGE- rd (2.82) 


上 式 称 为 WienerHepf 方程 。 它 是 大 识 过 程 脉冲 响应 的 理论 根据 。 如 果 输 和 人 信 生 
是 均值 为 零 的 白 噪声 ,其 自 相关 函数 为 


RuCr) = ofr) (2.83) 
则 式 (2.82) 变 为 
Re(c) = | ED8(r)dt = 5 人 (2.84) 
从 而 可 以 得 到 
太 (r) = Re 人 (2.85) 


从 而 可 见 ,只 要 计算 出 系统 输 人 输出 数据 的 互相 关 范 数 ,就 可 以 方便 的 求 出 肪 
冲 响应 的 估计 。 
2. 用 M 序列 作 输 入 信号 的 响应 估计 的 一 般 算 法 


由 于 M 序列 的 统计 特性 近似 于 白 噪 声 , 根据 双 iener-Hopf 方程 , M 序列 响应 
为 


站 
Re (z) 风 8(DRw(i -zjdt (2.86) 
式 中 ,JY 是 M 序列 的 循环 长 度 ;4t 是 M 序列 移 位 脉冲 的 周期 。 当 Je 充分 大 时 ， 
民 ReCr) se az 让 Cr) (2.87) 


式 中 ,e 为 M 序列 的 帆 值 。 可 见 输 人 信号 用 M 序列 和 用 白 品 声 结果 是 类 似 的 ,但 
此 时 脉冲 响应 只 需 计 算 一 个 周期 的 互相 关 画 数 Refr), 大 大 的 缩短 了 辨识 的 时 
间 。 可 见 , 这 种 方法 对 且 冲 响应 的 估计 值 的 计算 相对 简单 得 元。 


-一 一 -下 
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当 数 据 来 集 的 时 间 和 At 相等 时 , 则 式 (2.86) 的 离散 形式 为 





及 ( 开 ) 宁 CDRa 一 让)A 【2 .88) 
1 序列 的 啊 应 相关 盯 数 可 写成 
| Re 一 SAM; 一 上 不)[z) 
二 由 一 和 


1 N .1 【2 8) 
Rir( 有 = 下 说 MG 一 全 MG 
大 了 = 册 


从 式 (2.89) 和 (2.88) ,可 推导 出 M 序列 的 自 相 关 示 数 为 


妇 2， 呈 一 02N 
民 MTC) = &2 (2.90) 


一 了 中 无 目 和 2 














RN 
系统 输 人 输出 的 互相 关 函 数 为 
(CN +1)azaAtr a2Aps 
Re( 有 = 人 (有 -人 280) (2.91) 
全 
2AE 了 
ec 二 fi 2.92 
RN 【 ) 
对 一 个 稳定 的 系统 来 说 ,c 是 有 界 常数 ,而 且 很 小 [ 当 mw, 充分 大 时 ), 则 有 
让 (上 ] [RE +cl (2.93) 


《CN + 1)a2At 

式 (2.93) 是 利用 相关 分 析 法 办 识 脉冲 响应 的 一 个 重要 会 式 。 它 描述 了 且 冲 啊 应 舍 
计 值 与 互相 关 画 数 之 间 的 关系 。 如 图 2.12 
所 未 。 

对 于 一 个 稳定 的 系统 来 说 , 当 有 一 co 
时 .去 (二 ) 一 0, 所 以 根据 式 {(2.93), 有 ec = 
一 形 ieoo)u 在 工程 上 ,一 般 取 “ = 
~- Ref -1T) 就 已 经 足够 满意 了 ; 有 时 其 
至 可 以 把 < 忽略 不 计 。c 的 取 值 并 不 影响 


生 二 2 达 踢 度 信 半 全 脉冲 响 座 的 形态 ,而 只 决定 脉冲 响应 在 维和 
本 标 上 的 位 置 。 
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3. 用 M 序列 作答 入 司 号 的 一 次 完成 算法 


根据 式 (2.88), 当 下 =0,1,2, ,No -1I 时 ,得 到 和 Nv 个 线性 联 立 方程 
ROSE(ON + 有 RN- 1) 证 + 二 RE 一 TD = Re 人 OA 
Rar(l)B(D) +T Rart0)EIOIT…+ RH+2IBUN 一 1) = Ri)AAL 


Rir(N -118(0) + RN - 280D + + RON -D = ReCV -DA 





{2. 呈 ) 
将 上 式 写 成 年 阵 的 形式 
肛 M 癌 一 ru/ (2.95) 
式 中 
让 = [ 癌 (0) , 训 (1) ,有 (CN -1)] 
RefO) Rir(-1) Re- IN +1) 
有 RN 1 RnwztD) RN 2 
下 Mr 一 : 和 
NO 一 1 一 2) RD 
NT 1 (2.96) 
人 1 一 和 二 Tt 
人 : : 
1 1  … --N 
Pr = [Re(C0) ,Re(1) RN 一 二 )] 工 


式 中 ,rw 为 在 M 序列 作用 下 系统 输 和 人 输出 的 相关 琐 数 和 矩阵 。 由 式 (2.95) ,得 


训 = 玉 MrweAai (2,. 97) 
式 中 
-N 1 1 31-1 
1 -NM 1 
Ri =- 环 | ， (2.98) 
Q : : 
L 1 1 -Jp 


由 于 
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[Nm 1 1 1r2 1 
1 和 】 | 工 1 
1 1 -RNJLl 1 … 
本 (CN 十 1 0 匡 
0 一 
= 人 。 --(Not+IDT 
人 必 (Vp 十 1 
{2.99) 
因此 
2 1 1 
AN 1 2 ] 
-1 由 
及 对 ONTT : (2.100) 
1 1 2 
根据 式 (2.89), 互 相关 冰 数 阵 又 可 以 写成 
{ 
ws = 一 (2.101) 
站 Ni 及 
式 中 
互 一 [zkD0) xp 一 1)] 
RATIO) RH 人 
| MA MI(0) MO 一 2 (2.102) 
MI Np+IL MHRNpt+T2 … AL0) | 
综合 式 (2.97) 一 (2.101) ,得 
-1L Ra 1 | 加 2.103) 
上 AR (COV +1l)a2Ar | 
1 1 … 2 


式 中 ,常数 只 阵 为 N, + 1 维 方 阵 。 式 (2.103) 为 M 序列 输入 脉冲 响应 的 一 次 完成 
算法 。 


4. 用 MT 序列 人 必 输 入 信号 的 递 推 荐 法 


为 了 在 线 辩 识 系统 的 脉冲 响应 ,将 第 守 时刻 的 互相 关 函 数 民企 人) 守成 递 推 的 
形式 
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站 CT 1 . 
民 向 (二 ) = 二 及 秘 ， 《下 ) 二 二 Mi 玉 ] zt (2.104) 
式 中 ,RD 为 第 (一 1 时 刻 的 互相 关 函 数 。 

根据 式 人 42.97) 和 (2.104) ,第 计时 刻 的 脉冲 响应 升 计 慎 的 遂 推 形式 为 





-0 00 -1 
吕 = 了 13 十 [TAR 人 (1 (2.105》 
式 中 ,站 表 示 采 样 鞋 第 人 - J 时 刻 的 脉冲 响应 估计 值 , 且 
fi) = [MD +I)] (2.106) 


5. 用 M 序列 作 输 入 信和 办 识 脉冲 响应 的 步骤 


(1) 预 估 被 辨识 系统 的 过 小 过 程 时 间 人 和 系统 的 最 高 工作 频率 户 ，。 工 和 
户 。 是 选择 M 序列 参数 的 依据 。 
(2) 在 系统 办 识 中 ,数据 必须 尽 可 能 多 的 包 信 欠 统 动态 特性 的 信息 。 这 和 答 
人 信号 的 选择 有 很 大 的 关系 。 因 此 ,实验 之 前 要 精心 地 选择 M 序列 的 参数 。 妆 
系统 的 频率 特性 接近 低 通 滤波 特性 时 ,AM 序 诈 的 参数 Ne 和 Ar 应 满足 下 述 条 件 
1 
| 产 > 入 《2.107) 
(ws 一 1A > 了 (2.108) 
式 (2.107) 表 明 ,序列 的 频带 必须 覆盖 系统 的 频带 ,这样 才 能 充分 激励 系统 的 所 有 
模 态 。 式 (2.108) 表 明 , AM 序列 的 循环 周期 必须 大 于 系统 的 过 小 过 程 时 间 , 以 保证 
时 间 大 于 NA: 后 ,脉冲 响应 吉 减 接近 于 零 。 另 外 ,AM 序列 的 幅度 不 能 选择 过 大 ， 
以 免 系统 进 人 非 线性 区 或 影响 系统 生产 ;但 也 不 能 过 小 ,以 保证 一 定 的 信 咒 比 。 
《3) 采集 数据 时 要 注意 , 当 AM 序列 刚 加 上 时 ,由 于 非 零 初始 条 件 的 作用 ,系统 
的 输出 在 一 段 时 间 内 时 是 非 平 稳 的 。 为 了 保证 状 识 精度 ,要 避 开 这 段 非 平 稿 过 程 ， 
一 般 可 以 从 第 二 个 循环 周期 开始 采集 数据 。 
《4》 数据 要 除去 起 分 量 , 有 条 件 的 还 要 进行 滤波 处 理 。 
(S) 计算 互相 关 冰 数 Re 0 如果 数据 较 儿 ,要 用 快速 傅 里 时 变换 (FFT) 方 法 
计算 相关 函数 ,以 减少 计算 量 。 
(6) 取 补 偿 c = 一 RN 一 lis 
(7) 和 用 式 (2.93) 计 算 脉 冲 响应 估计 量 训 (到 )。 
(8) 若 采 用 M 序列 作 输 人 信和 号 ,辨识 步骤 同上 。 


2.5.5 相关 分 析 法 脉冲 响 庶 庶 用 
例 2.,7 某 炼 油 厂 常 压 加 热 锅炉 炉膛 温度 由 汽 动 燃料 调节 甩 膜 头 压 力 控制 ， 
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如 图 二 13 所 示 ， 利 用 相关 分 析 法 状 识 总 动 凋 节 膜 头 压 力 到 炉 朵 温度 通道 的 脉冲 
上 响 记 ， 


AU 气动 调和 亿 央 





图 2.13 压力 干扰 加 热 炉 


解 

0) 预 佑 炉子 的 过 波 过 程 时 间 刀 不 大 于 5S0min, 最 高 工作 频率 厂 ， 低 于 
0.0012Hz。 

(2) 选择 M 序列 参数 .根据 式 (2.107) , 取 Ar= min, 使 1/3Az=0.001 39I 也 
>10.001 2Hz; 根 据 式 (2.108) ,确定 Ny=15, 保 证 (N,-1)Ar= 56min; 且 M 序列 
近 表 2.5 玛 值 , 另外 , 根据 运行 经 验 , 气动 凋 节 闪 膜 头 压 力 扰 动 幅 度 取 
0.03 kgxcn ,可 保证 对 象 不 进入 非 线性 区 ,并 有 了 骨 旺 的 输出 响应 。 













表 2,5 压力 扰动 记录 
[TvrTz[z[sTsfsf7TeryTaTaafn 
和 二 |]=‖ -小 = 灿 = | 1*| | | 二 | | 一直 |- 





胡 中 必 + “代表 由 03kgyenz -代表 -003kRenP_ 


(3) 为 了 获得 温度 响应 的 平稳 过 程 ,要 在 压力 扰动 加 入 一 个 循环 周期 开始 记 
录 数 据 。 各 个 时 刻 的 系统 输出 观测 秆 如 表 2.6 所 示 。 
(4) 利用 表 2.5 和 表 2,6 的 数据 ,计算 互相 关 函 数 Re (人 )。 
(5) 杠 据 式 (2.93) 和 以 上 条 件 , 可 推出 计算 脉冲 响应 估计 值 的 表达 式 为 
胞 (大 ) = 让 + 
= 260.4| Re(k) + (2.109) 


式 中 ,互相 关 本 数 Rs(A) = > MUi -jz 


式 (2.109) 中 , 取 上 = -Rs(ld)=0.0088-。 对 应 的 互相 关 函 数 Rw.(k) 和 脉 
冲 响 应 个 计 值 计算 结果 如 束 2.7 所 示 。 如 果 惩 用 比较 充足 的 数据 (N, 再 取 大 些 )， 
辨识 精度 还 可 以 进一步 提高 ， 
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次 2.6 各 个 时 肇 的 系统 输出 观测 值 


] 二 
站 








囊 2,7 互相 关 函 数 Resz [kJ 和 脉冲 响应 估计 值 
并 0 | 1 2 号 | 5 | 五 
ks 证] - Ca20 和 087 看 .64<TIO 2 1T. 的 x 雹 -10.76xl0210.26X10 -2 | 一 骨头 









































全 -和 由 吃 2,97 让 ,97 
吕 ()  _ 上 | 一 一 一 -一 
大 | 7 1 8 | 9 1 1 12 13 1 
- 
-0.19x | -030x | -0.77x -0.94x | -085x | -07Lx | -tx -0.88x 
下 人 ， 
10 : 10 7 10-2 ， 茹 -: 10-? 10- 107: 107 
全 杷 1 .的 1 .38 0,29 | -人 ,1 站 .0 们 ,44 一 中 ,3 [0 
2.6 小 “” 结 


本 章 包括 辨识 的 理论 基础 和 古典 辩 识 法 两 部 分 内 容 , 在 2.1 一 2.4 节 因 识 的 理 
论 基 础 部 分 中 ,主要 介绍 了 随机 过 程 的 基本 概念 及 其 数学 摘 述 , 谱 密 度 与 相关 邯 
数 、 线 性 系统 在 随机 和 输入 下 的 响应 ,随机 序列 和 白 噪声 及 其 产生 方法 。 系 统 辩 识 所 
再 的 数据 通常 售 肯 了 品 声 ,如 果 这 种 则 声 相关 性 较 弱 或 者 强度 很 小 , 则 可 以 近似 将 其 
视 为 白 品 声 。 央 此 , 蛋 取 声 是 一 类 非常 重要 的 随 酌 过程, 它 的 基本 概念 及 其 产生 方 
法 与 系统 辨识 密切 相关 。 因 此 ,这 里 不 公 重 点 讨论 了 用 匀 则 余 法 产生 随机 序列 和 
产生 月 唆 声 的 理论 和 方法 ,还 讨论 了 用 移 位 积存 器 产生 M 序列 的 理论 和 方法 , 同 
时 ,分 别 开 发 了 各 种 方法 对 应 的 产生 随机 序列 . 白 噪 声 和 M 序列 的 三 种 程序 。 在 
2.5 节 古 典 辩 识 法 中 ,介绍 了 相关 分 析 法 辩 识 和 相关 中 数 的 概念 ,讨论 了 祖 关 分 析 
频率 响应 和 相关 分 析 脉 冲 响 应 法 辨识 ,并 列举 了 相关 分 析 脉 冲 响 应 法 辨识 的 实例。 


习 是 


. 简 述 互相 关 画 数 与 互 协 方差 国 数 的 主要 性质 。 

.系统 辨识 时 ,持续 激励 信和 叶 鸭 特点 是 什么 ? 

. 随机 晓 声 和 和 白 噪 声 的 主要 区 蓝 是 什么 ? 

. 试 利用 乘 同 余 法 , 选 尺 =10,4=3,&=4,M=104=10000, 递 推 80 次 ,采用 
MATLAB 的 仿真 语言 人 tm 软件) 编程, 产生 (0,1) 均 与 分 布 随机 数 ,打印 出 程序 
和 运行 结果 。 


和 To 
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5. 仍 用 乘 同 余 法 , 选 尺 =10,4=3, 有 =4,M=10=10000,， 递 推 20 次 ,采用 
MATLAB 的 仿真 语言 (Am 软件 ) 编 程 ,产生 ( - 1,.1) 均 匀 分 布 白 噪声 序列 ,并 比 
较 在 同样 条 件 下 ,产生 (0, 贡 均匀 分 布 随机 数 和 产生 ( -1,1) 均 匀 分 布 白 咯 声 序 
列 的 程序 主要 区 别 有 了 哪些 ? 
6. 试 说 明仁 么 是 伪 随 机 信和 号 ? 
7. 用 移 位 寄存 器 产生 M 序列 |M(R) 时 ,ME 序列 有 时 些 特点 ? 怎样 确定 M 序 
列 的 循环 长 度 为 N,? 斌 解释 |Af(R ) 的 “游程 和“ 段 "的 含 祥 ? 
8&8， 上 自 相 关 函 数 和 互相 关 函 数 的 定 光 主要 区 别 是 什么 ? 
9. 在 相关 分 析 法 辩 识 中 , 激 亏 (输入 ) 信 号 用 1 ME )| ,利用 互相 关上 曙 数 计算 系统 
的 脉冲 响应 方法 ,说明 递 推 算法 和 一 次 完成 算法 有 和 区 别 ? 
10. 依据 例 2.6 的 条 件 ,结合 例 2.3, 选 用 0 级 移 位 需 存 器 产生 AN = 1023 的 M 
序列 ,用 该 M 序列 作 输 人 信和 叶 的 递 推算 法 ,采用 MATLAB 的 他 真 语言 (m 软 
件 ) 编 程 , 求 如 热 炉 的 脉冲 响应 ,并 打印 出 结果 。 


第 3 章 最 小 二 乘 参 数 辨 识 


最 小 二 乘法 是 一 种 经 典 的 数据 处 理 方法 。 本 章 将 研究 最 小 二 乘 类 参数 辨识 方 
法 ,主要 包括 最 小 二 乘 参 数 估计 的 一 次 完成 算法 .最 小 二 乘 递 推算 法 . 增 广 最 小 二 屁 
法 义 最 小 二 乘法 和 多 级 最 小 二 乘法 。 其 中 最 小 二 乘 的 一 次 完成 算法 是 最 基本 的 ， 
也 是 应 用 最 广泛 的 一 种 方法 ,其 余 的 方法 都 是 以 最 小 一 冬 原 理 为 基础 推导 出 来 的 。 


3.1 最 小 二 乘法 的 概念 


申 在 1795 年 ,著名 科学 家 高 斯 就 提出 了 最 小 二 滋 法 LSMIleast squares method) ， 
并 将 其 应 用 到 了 行星 和 芍 星 运动 轨道 的 计算 中 。 高 斯 在 计算 行星 和 趋 星 运 动 轨道 
时 ,要 根据 望远镜 所 获得 的 观测 数据 ,估计 描述 天 体 运 动 的 六 个 参数 值 。 高 斯 认为 ， 
根据 观 铀 数据 推断 未 知 参数 时 ,未 和 郑 参数 的 最 合 通 数 值 应 是 这 样 的 数值 , 它 使 各 次 实 
际 观 测 值 和 计算 值 之 间 差 值 的 平方 滋 以 放量 其 精确 度 的 数值 以 后 的 和 为 最 小 。 这 就 
是 最 时 的 最 小 二 乘法 思想 。 此 后 ,最 小 二 乘法 就 被 用 来 解决 许多 实际 问题 。 针 对 不 
同 用 途 , 对 最 小 二 乘法 进行 修正 ,就 出 现 了 各 种 相应 的 最 小 二 乘 算法 。 

在 系统 辨识 领域 中 ,最 小 二 乘法 是 一 种 基本 的 咎 计 方 法 。 最 小 二 苹 法 可 用 于 
动态 系统 ,也 可 用 于 遂 态 系统 ;可 用 于 线性 系统 ,也 可 用 于 非 线 性 系统 ;可 用 于 离线 
估计 ,也 可 用 于 在 线 佑 计 。 在 随机 的 环境 下 ,利用 最 小 二 乘法 时 ,并 不 要 求 观测 数 
据 提 供 其 概率 统计 方面 的 信息 ,而 其 估计 结果 , 却 有 相当 好 的 统计 特性 。 最 小 二 乘 
法 容易 理解 和 掌握 ,利用 最 小 二 溢 原 理 所 拟 定 的 辨识 算法 在 实施 上 线 较 简单 。 在 
其 他 参数 辨识 方法 难以 使 用 时 ,最 小 二 乘法 能 提供 问题 的 解决 方案 。 此 外 ,许多 用 
于 辨识 和 系统 参数 佑 计 的 算法 往往 也 可 以 解释 为 最 小 二 乘法 。 所 有 这 些 原 因 使 得 
最 小 二 乘法 广泛 应 用 于 系统 辨识 领域 ,同时 最 小 二 滋 法 也 达到 了 相当 完善 的 程度 。 


3.1.1 系统 辨识 结构 


考虑 随机 模型 的 参数 估计 问题 时 ,首先 考虑 单 
输入 单 输出 系统 SISO(single input single output)j。 
如 图 3.1 所 示 ,把 竺 辨识 的 系统 看 做 “时 箱 ”, 它 只 
考虑 系统 的 输入 输出 特性 ,而 不 强调 系统 的 内 部 机 
理 。 图 中 ,输入 x(A 和 输出 =(&) 是 可 以 观测 的 ; 
G(z-1 是 系统 模型 ,用 来 措 述 系统 的 输 和 人 输出 特 图 3.1 SISO 系统 的 - 山 箱 结构 
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性 ;NIz 已 是 噪声 模型 , w(&) 是 白 唆 声 ,e(&)} 是 有 色 噪 声 , 根 据 表 示 定 理 , 可 以 表 
示 成 


et)= NE of 【3.1 
通常 
_ Bfz- ) _ P(z”) 
好 [21) = 一 一，Nz = 一 一 一 {3,2) 
(AD Cs 
式 中 
AAA(zy 一 1+eiz- 1 十 Ga 十 …' 十 Qa 和 
3.31) 
且 (z 1) = 六 2 一 1 十 下 十 二 De 
CUzrt 一 1+cig Tecas 2 十 1 Ca 
一 -1 一 2 一 《3.4) 
D(z ) 二 工 +GI2 二 人 2 


本 章 所 用 的 系统 模型 总 是 一 样 的 , 唆 声 模型 在 各 个 方法 中 有 所 不 同 。 邓 冬 际 
辨识 问题 来 说 ,应 该 选用 什么 样 的 模型 ,这 没有 一 般 的 原则 可 循 。 冯 的 来 说 ,可 先 
选择 简单 的 模型 获得 辨识 的 结果 ,检验 模型 的 可 信和 度 , 或 者 看 实际 的 使 用 效果 。 如 
果 不 能 满足 要 求 ,就 需要 换 用 他 种 模型 ,这 时 所 用 的 辨识 方法 自然 也 就 不 同 。 也 就 
是 说 ,解决 一 个 实际 问题 , 到底 应 该 采用 哪 种 辨识 方法 ,这 要 取决 于 模型 类 的 选择 ， 
而 模型 类 的 确定 往往 需要 通过 多 次 的 实验 比较 ,最 后 才能 确认 。 


3.1,2 最 小 二 乘法 的 基本 概念 
对 于 SISO 离散 随机 系统 ,其 措 述 方程 为 


人 (下 十 昌 12( 开 一 ) 十 十 Cr ( 雪 一 天 ) 
= xz( 归 一 1) Bat( 下 一 2) 十 及 (一 736 十 e 二 ) (3.5) 


式 中 ,zx(&) 为 系统 输出 重 的 第 上 次 观测 值 ,= 人 一 1) 为 系统 输出 量 的 第 上 一 1 次 观 
测 值 ,依次 类 推 ;x() 为 系统 的 第 & 个 输入 值 ,xz (一 1) 为 系统 的 第 (~-1) 个 输入 
值 ;,e(k) 是 均值 为 零 的 随机 噪声 。 将 式 (3.5) 改 写 
多 () 一 一 和 | 芝 ( 直 一 1) 一 … 一 Qn 2 人 (大 一 字 ) 
+ DR 让 一 ) 十 四 下 (下 一 2) 十 囊 ( 生 一 2) 士民 天 ) (3.6] 


可 得 系统 输入 输出 的 最 小 二 和 飞 格式 


2{ 天) 一 三 芭 ) 人 十 EC 天) (3.7) 
式 中 , 为 样本 集合 ,6 为 被 辨识 的 参数 集合 。 
『 天 (和 一 【 -2 一 1 一 下 一 (一 1 一 2 


自 二 [ayazy ,an 81b2 
《3.8) 
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取 准 则 函数 
J(8) = > ef 有 )]2 = > [z(R)》 一 下 TD9]? (3.9) 


使 J9)=min 的 9 估计 值 记 作 页 s, 称 作 和 参数 8 的 最 小 二 乘 估计 值 。 

F 述 基本 福 念 表明 ,未 知 模型 参数 由 最 可 能 的 值 是 在 实际 观测 值 与 计算 值 之 
黑 次 误差 的 平方 和 达到 最 小 值 处 ,所 得 到 的 这 种 模型 输出 能 最 好 地 接近 实际 系统 
的 输出 。 

例 3.1 考 玫 一 个 离散 时 间 STSO 系统 , 设 作 用 于 系统 的 输 和 人 序列 为 1al)》， 
if2) (相应 观测 到 的 输出 序列 为 1zfly,sf2) sz( 工 )。 选 择 下 列 
模型 

2&f(E) + 一 1) 三 Bt 一 1 十 BC) 《3.t10》 
式 中 ,ae 为 待 辩 识 参 数 。 将 上 式 写 成 最 小 二 乘 格式 


sf 有 [xz(TDa(E- 0 ef 有 = AT(UEB+ et 有 《3.11] 


采用 准则 上 晒 数 
了 (8@) = > [eey]12 = 过 [2(R) Tag 1 一 5 人 12 (3.12) 


根据 输入 输出 数据 ， , 极 小 化 了 ， 求 参 数 v、 8 使 得 凡 0) 一 min。 这 就 是 最 小 二 乘 辩 识 
问题 。 


3.2 最 小 二 和 滋 问题 的 摘 述 


设 时 下 变 STSO 系统 的 数学 模型 为 
A(z 1)z() = 刀 (z )a( 开 ) +e( 大 ) [3.13) 
式 中 ,wx(R) 和 zf) 为 系统 输入 输出 量 ;e(k) 是 噪 声 ; 多 项 式 4 人 RE 和 百 (0R) 如 式 
(3.3) 所 示 。 现 在 的 问题 是 如 何 利 用 系统 的 输 和 人 输出 数据 ,确定 多 项 式 4A() 和 
8B(E) 的 系数 。 

在 解 抉 这 类 系统 办 识 问题 之 前 , 先 明 确 一 些 基本 假设 和 基本 关系 。 首 先 假定 
系统 模型 (3.13) 的 阶 次 mr。 和 z 已 经 设 定 , 且 一 般 有 za > xs。 当 取 相同 阶 次 时 ， 
记 作 呈 = 到 = 有。 其 次 ,将 模型 (3.13) 写 成 最 小 二 匀 格 式 

z( 有 ) 一 下 葡 二) 日 十 ef 大) (3.14) 
式 中 
大 () = [一 s( 开 一 1 (一 1 一 0) 
1 = [etaz，an 2 
(3.15) 


CPP Li 一 一直 一 一 mm 


，5S6 .。 系统 认识 及 其 MATLAB 仿真 








对 于 有 =1,2,…, 汪 ,方程 (3.14) 构 成 一 个 线性 方程 组 ,可 以 把 它 写成 





ZL( 开 ) 二 (RE)0 Ter( 克 ) (3.16) 
式 中 
之 { 了 了 ef1+ 
zft2) ef2) 
芝 [， 一 ， >  L 一 。 
世 ( 工 ) 《 工 ) 
一 “0 。 一 & 人 | -- 7 rt0》 ， 了 (一 好) 
下 - 一 机 -一 52 如 站 “4 2 - 2 ) 
一 go 2 
， 《3.17)》 
另外 , 设 模 型 (3.14) 的 噪声 ef 外 完全 可 以 用 一 阶 和 二 阶 统计 惩 阵 描 述 , 即 设 
它 的 均值 矩阵 和 协 方 盖 扎 阵 分 别 为 
天 er = [je 下 ef2) 五 te( 工 ) 门 = 必 (3.18) 
下 je) 王 fefl)e(2) 和 下 je(1)e( 工 刘 
3 ,， 2yp 
uvlei Eee =- 2 0 刁 | 1 ( 工 )| 
[ie(CC)e(D)1 瑟 1efLyet2)| 瑟 fe2( 工 ) 
= 会 2， (3.19) 


为 了 评价 最 小 二 乘 估计 的 性质, 还 必须 进一步 假设 噪声 e{) 是 不 相关 的 , 而且 是 
同 分 布 的 随机 变量 。 简 单 的 说 ,必须 假设 |e(E 让 是 白喉 声 序 列 , 即 
天 er = 0 
人 = df 了 
式 中 ,只 为 噪声 ef 人) 的 方差 ;了 为 单位 矩阵 。 有 时 还 要 假设 噪声 e(8) 服 从 正 态 分 
布 。 此 外 , 还 认为 噪声 e( 友 ) 和 输 人 z( 才 ) 是 不 相关 的 , 即 
玖 1efR)ae( 开 一 站 | 二 上， 吕 下 7 (3.21) 
最 后 ,如 何 选择 数据 长 度 也 是 妻 考虑 的 问题 。 显 然 , 联 立 方程 组 (3.16) 具 有 工 
个 方程 ,包含 . + 了 全 个 未 知 数 。 如 果 工 < ma + 由 ， 方 程 的 个 数 少 于 未 知 数 个 数 ， 
模型 参数 f 不 能 惟一 确定 ,这 种 情况 一 般 可 以 不 去 考虑 它 。 如 果 工 = 徊 + 画 , 则 
只 有 当 er =0 时 ,9 才 有 惟一 的 确定 解 。 当 拭 和 和 时 ,只 有 取 工 >mra+ xz, 才 有 了 可 
能 确定 一 个 “最 优 ?的 模型 参数 8 ,而 且 为 了 保证 辨识 前 精度 ,二 必须 充分 大 。 


(3.20) 
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3.3 最 小 二 乘 问 题 的 一 次 完成 算法 
3.3.1 普通 景 小 二 和 狐 问 题 的 解 


考虑 模型 
刀 ( 下 ) 一 下 区 交 ) 可 十 ef 开 ) 《3.22) 
的 辨识 问题 , 式 中 ,z(E] 和 天 人) 都 是 可 观测 数据 ,@ 是 待 估 计 参 数 , 取 准 则 画 数 


JI8)= >, [e(E)]2 = > [z(k) 一 FT(R)N0]2 (zi -了 9)T(zl 一 下 9) 
生 一 二 是 三 | 


(3.23) 
极 小 化 了 8), 求 得 参数 9 的 估计 值 ,将 使 模型 的 输出 最 好 地 预报 系统 的 输出 。 


设 Bs 使 得 J(6)| 。 = min, 则 有 


了 8 和 3 
2 5 = 巴 (c -本 和 )I(zi 一 百 D) = 0 {3.24] 
展开 上 式 ,并 运用 如 下 两 个 向 量 微 分 公式 
二 (aTx) = &T 【3.25a) 
口 革 
(xzThx) - 2xr4， 4 为 对 称 阵 (3.25b) 
得 正则 方程 
【 百 J 工 王 ; ) 在 < 一 再 Tzi (3.26) 
当 豆 :8; 是 正则 矩阵 时 ,有 
让。 一 【再 三 末 T< (3 了 .27) 
且 4 
对 
3 ?= 2HiH > (3,28) 





所 以 满足 式 (3.27) 的 甸 s 使 J(8)| 5 = min, 并 且 是 惟一 的 。 


有 通过 极 小 化 式 (3.231) 计 算 让 :的 方法 称 作 最 小 二 乘法 ,对 应 的 市 s 称 为 最 小 二 
乘 估 计 值 。 


3.3.2 加权 最 小 二 乘 问题 的 解 


研究 加 权 最 小 二 习 三 LS(weighted least squares) 问 题 时 ,考虑 模型 
z( 下 ) 二 下) 人 十 e( 二 ) (3.29) 


“ 垄 ， 系统 办 识 玉 其 MIATLAB 仿真 


取 准 则 函数 
了 了 上 
J( 的 = 2 A(R)[er 了 = 之 和 (人 )Fz( 天 ) 一 用 T( 友 ) 介 ] 


= (zz -于 和 TAUzr -五 人 (3.30) 
式 中 ,本人 ) 称 为 加 权 因 子 , 对 所 有 的 天,4() 都 必须 是 正 数 。 引 和 大 加权 因 子 的 目 
的 是 为 了 便于 考虑 观测 数据 的 可 信和 上 。 如 果 有 理由 认为 现在 时 刻 的 数据 比 过 去 时 
刻 的 数据 可 车 ,那么 现在 时 刻 的 加 权 值 就 要 大 于 过 去 时 刻 的 加 权 值 。 比 如 可 选 
并 (和 )= 上 SnSCLl。 妆 此 =1 时 ,和 (= AS1;: 当 大 = 工时 ,和 (人工 )=1， 
这 就 体现 了 对 不 同时 刻 的 数据 给 予 了 不 同 程度 的 信任 。4() 的 选择 ,取决 于 人 的 
主观 因素 ,并 无 一 般 规律 可 循 。 在 实际 应 用 中 ,如 果 对 象 是 线性 时 不 变 系 统 , 或 者 
数据 的 可 售 度 还 难以 确定 , 则 可 以 简单 地 选择 4(K) =1,VYA。 若 在 一 定 条 件 下 ， 
根据 噪声 的 方差 对 4 人 (R ) 进 行 最 佳 选 择 ,得 到 的 估计 值 称 作 Markev 估计 。 

根据 式 (3.17) 的 定义 ,准则 画 数 JJ) 的 二 次 型 形式 为 


JU 一 《2 一 于.9)T4 (2 一 五 6) (3.311) 
式 中 ,加 权 阵 4r 一 般 是 正定 怎 阵 , 它 与 加 权 因 子 的 关系 是 


显然 , 式 (3.31) 中 开 :9 代表 模型 的 输出 ,或 者 说 是 系统 输出 的 预报 值 。/(8) 可 以 
被 厦 做 用 来 衔 量 模型 输出 与 实际 系统 输出 的 接近 情况 。 极 小 化 J(9) , 求 得 参数 6 
的 佑 计 值 ,将 使 模型 的 输出 最 好 地 预报 系统 的 输出 。 








设 和 ws 使 得 J(6) 8 一 Inin， 则 有 
5，-= 二 ( - 卫 814 (zi 一 五 8) = 0 【3.33) 

展开 上 式 得 正则 方程 

(2 IT) 8wns 一 互 | 工 4 zr 《3.341》 
当 车 74; 于 是 正则 和 矩阵 时 ,有 

pws = (下 j 册 4 下) 瑟 J4iz (3.35) 
且 

2 

人 下 。 一 2 也 工 4) 瑟 ， 2 0 《3.36) 








所 以 满足 式 (3.35) 的 @ws 使 9) 5， =min, 并 且 是 惟一 的 。 


通过 极 小 化 式 (3.31) ,计算 和 ms 的 方法 称 作 加 权 最 小 二 习 法 ,对 应 的 Bwas 称 
为 加 权 最 小 二 乘 佑 计 值 。 旭 果 加 权 阵 取 单 位 阵 4 = 了 工 , 式 13.35) 退 化 为 式 
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(3.27)。 可 以 看 出 最 小 二 乘法 是 加 权 最 小 二 乘法 的 一 种 特例 。 

当 获得 一 批 数据 后 ,利用 式 (3.27) 或 (3.3S) 可 一 次 求 得 相应 的 参数 佑 计 值 ,这 
桩 处 理 问 题 的 方法 就 称 作 一 次 完成 算法 或 “ 整 批 "算法 。 它 在 理论 研究 方面 有 许多 
方便 之 处 ,但 当 和 矩阵 的 维 数 增加 时 ,矩阵 求 着 运算 的 计算 量 会 急剧 增加 , 这 会 给 计 
算 机 的 计算 速度 和 存 情 量 带 来 负担 ,因此 有 时 也 可 用 高 斯 消 元 法 直接 解 正则 方程 
(3.26) 和 (3.34) ,以便 更 快 地 求 得 参数 的 估计 值 。 另 外 .一 次 完成 算法 要 求 
理 i47E 必须 是 正则 抢 阵 (世道 矩 阵 ), 其 充分 必要 条 件 是 系统 的 输 和 人 信和 号 必须 是 
2? 阶 持续 激励 信号 。 这 就 意味 着 辨识 所 用 的 输入 信和 号 不 能 随意 选择 ,否则 可 能 造 
成 不 能 辨识 。 目 前 常用 的 信号 丰 : 

(1) 随机 序列 (如 白 吧 声 ); 

(2) 的 随机 序列 (如 M 序列 或 着 邮 序列 ); 

(3) 离散 序列 ,通常 指 对 含有 ， 种 频率 (各 频率 不 能 满足 整数 倍 关 系 ) 的 正弦 
组 合 信 叶 进行 采样 处 理 获得 的 离散 序列 。 

例 3.2 写 出 系统 脉冲 响应 的 最 小 二 乘 一 次 完成 算法 估计 值 。 

设 线性 系统 的 输出 =() 用 输入 序列 | 人 与 脉冲 啊 应 序列 18(, =0， 
1, ,Ni 的 卷 积 和 形式 表示 


(有 = > gu 人 人 + mp( 有 (3.37) 


式 中 ,z(K) 是 系统 输出 洲 量 噬 声 , 设 它 是 均值 为 零 的 白 噪 声 。 
当 取 有 上 =0,1,…, 时 , 式 (3.37) 可 写成 式 (3.16) 的 形式 





《下 ) 一 本 是) 及 十 PC 天 ) 《3.38) 
陈 中 
2 人 1 ) 8(0) zf 1 
(2) 8EK1I zf2) 
&L 一 。 一 - WiT 一 : 
z( 工 ) ED) ref 工 ) 
红 ( |) 以 (TD) 一 
吾 = 四 人 人 人 (39) 
zf(L) EL-1) LN) 


8 为 待 辨 识 参 数 , xz: 和 丽 ; 都 是 可 观测 数据 ,根据 式 (3.37) ,系统 脉冲 响应 的 最 小 
二 乘 一 次 完成 算法 的 估计 值 为 

多 一 【〈 再 ) 于 xz (3.40) 

值得 注意 的 是 ,如 果品 声 序 列 是 零 均值 的 ,而 且 输 人 输出 数据 向 其 和 噪声 是 相 
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互 独立 的 , 则 最 小 二 乘 佑 计 或 加 权 最 小 二 乘 估计 是 无 偶 差 估计; 否则 最 小 二 乘 合计 
将 不 再 是 无 偶 舍 计 。 


3.4 最 小 二 乘 一 次 完成 算法 的 MATLAB 仿真 


例 3.3 考虑 仿真 对 象 
( 开 )》 一 1.55( 雪 一 1 十 四 7 了 z( 天 一 2) 一 福全 一 1) 十 上 .58 一 2 十 避 ( 天 ) 
《3.41) 


式 中 ,um(&) 是 服从 正 态 分 布 的 白 趴 声 .4Y 〈0,1)。 输 人 信和 号 采用 4 阶 M 谋 列 ,幅度 


为 1。 选择 如 下 形式 的 辩 识 模型 
科 { 下] 十 他 | 这 ( 克 一 1 十 CS 下 一 2 一 几 1 认 【 开 一 雪 ) 十 瑟 2 (大 一 2) 十 刀 ( 赤 ) (3.42) 


按 式 (3.17) 构 造 xz 和 三 ;数据 长 度 取 工 =14; 加 权 阵 取 4 = 开 利用 式 (3.35) 或 
(3.27) 计 算 参 数 估计 值 页 s。 

设 输 人 信号 的 取 值 是 从 &=1 到 =16 的 朵 序列 , 则 待 办 识 参 数 页 s 为 抽 s= 
( HT) LEEzr。 式 中 ,被 办 识 参数 入 s、 观 测 矩 阵 并 、 开 :的 表达 式 为 


了 


台 1 xf 3 一 sf2) -~ gfl) za(2] zf) 
Be = ,= 5 , 王 = | 2 ) 本 (3.43) 
1 : ; : : 
3 xf 167 -zft5) -zf14) afl5) af14) 





程序 框图 如 图 3.2 所 示 。MATILAB 6.0 仿真 程序 如 下 : 


| 定义 输出 观 湾 值 的 长 度 并 计算 系统 的 输出 值 


根据 式 (3.27) 计 算 参 数 让。 
















从 看 5 中 分 离 出 并 显示 图 被 撩 识 参 若 capsils 





图 3.2 最 小 一 嫌 一 人 完 成 算法 程序 框图 
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又 二 阶 系 统 的 最 小 二 乘 一 如 完 成 算法 辨识 程序 ,在 光 查 中 的 文件 名 ;FLeh3LSeg1.m 
u=[ -1 -1 一 -il 一 111]3; 5% 系 统 罪 识 的 输 人 信号 为 一 个 周期 的 M 序列 
z 一 zerosf1,16)， 观 定义 输出 观测 值 的 长 座 
forE 一 33:16 
zfk) 一 1.S>zftk 一 1) 一 有 .7xEK-27+Kk 一 t+0Suk 一 2); 多 用 理想 输出 值 作为 观测 昼 
End 
subpletf3 ,1L) % 画 三 行 一 列 图 形 窗口 中 的 第 一 个 图 形 
stermfua) 画 输 人 信和 的 径 线 图 形 
subplot(3,1,2) 入 面 三 行 一 列 图 形 窗 口中 的 第 二 个 图 形 
i=1:13:16; 久 横 坐标 范围 是 1 到 16, 步 长 为 1 
Blotfi,z) %% 图 形 的 构 坐 标 是 采样 时 肇 ，， 纵 坐标 是 输出 观测 值 =>， 图 形 欣 式 汐 连续 曲线 
subplat(3,1,3)》 % 画 三 答 一 列 图 形 密 口中 的 第 三 个 图 形 
stern( zy,grid on 听 画 出 奏 吕 观测 值 z 的 径 线 图 形 , 并 显示 坐标 网 格 
uiz % 显 示 输 人 信号 和 输出 观测 信和 
听 L= 14 负数 据 长 度 
HL=[ 一 zf 一 中 1 一 3 一 下 27u3) (2 -24 一 开 3J 人 43 一 2 一 下 和 CS 4 
入 一 焉 的 一 红 S) 5) uC55 一 下 7 一 民 6) MT 6 一 焉 引 一 z77 uC8) u(7)3 29 一 下 8 9) (87; 
又 一 中 107》 一 区 9 utO US 一 511) 一 民 10) uC uC1D)3 一 人 tufl2) 一 民 13) 一 民 12) 
台 uL13) 12)3 一 民 14) 一 开 13) ul4) ul13)- zf15)- z14) WwW15)7 ut14)] % 和 样 本 本 阵 吾 , 赋值 
ZL= [zl3)584)12(5)1z6)iz7 了 JSz9)iz10)5zfll)iztl2yszt13)3zt1d4)3z15S)izt16)] %% 插 样 本 矩阵 
zxL 赋 值 


铂 Caleuaring Pararrmeteta 


cl=HLw HL c=invfcl)i cq=HL* ZLi c=c2vc 负 计 算 并 显示 人 
和 让 splay Paraametetas 


天 =eflD)， 达 =ef(2)， =cf3) 上 2 一 (4) 向 其 让 5 中 分 离 出 并 显示 af ez .6 、 术 


%End 

程序 运行 结果 ; 

>> 

ua=[-11 -14 -1.1.-1 一 lt 





2 一 [000.50 的 ,0.2500;0.5250.2,.1125，4.3012.6.47331.6.1988,3.2670, 一 0.9386,- 3.1949，- 4.6352 ， 
石 .2165， 一 5.5800， 一 2.5185] 
0 有 1.0000 -1.0000 
一 ,5000 0 一 1.0000 1.0000 


- 6 ， 系统 罪 识 区 其 MATLAHE 仿 真 

上 L = 的 .5900,0.2500.0. 到 50,2.1125, 4.3012,.6.4331,6,1988,3.26 加 .一 和 .9386， 一 3 1949 ,一 4.6352， 
一 各 ,2165 ,一 S.5800,， 一 2,5185 订 
c=[ 一 1.5000.0.7000.1.0000.0.5000 了 人 
al 二 ~1.5000 
682=03000 

Ph = TO000 
E=0.5000 
程序 运行 曲线 如 图 3.3 所 示 。 
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图 3.3 最 小 二 秒 一 次 完成 算法 仿真 实例 中 输 人 信号 和 输出 观测 什 
从 仿真 结果 表 3.1 可 以 看 出 ,由 于 所 用 的 输出 观测 值 没 有 任何 噪声 成 分 ,所 以 
辨识 结果 也 无 任何 误差 。 
表 3.1 昨 小 二 莱 一 次 完成 算法 的 辨识 结果 


参 数 衬 上 他 刁 1 右 2 
真 值 一 1.5 0.7 1 0.5 
性 计 值 -1.5 站 ,了 1.0 0.5 


例 3.4 根据 热力 学 原理 ,对 给 定 质量 的 气体 ,体积 Y 与 压力 己 之 间 的 关系 
为 V = 有 ,其 忠和 有 为 待定 参数 。 经 实验 获得 如 下 一 批 数据 , V 的 单位 为 立方 
英寸 ,P 的 单位 为 帕 每 平方 英寸 。 

7 54.3 全 .8 72.4 88.7 118.6 194.0 

PP 62 49.5 37.6 28.4 19.2 40.1 
试用 最 小 二 乘 一 次 完成 算法 确定 参数 vc 和 有 

普 先 要 写 出 系统 的 量 小 二 乘 表 达 式 。 为 此 ,把 体积 Y 与 压力 已 之 韶 的 关系 
PYa = 有 改 为 对 数 关 系 , 即 ,logP = - alogV + log8。 此 式 与 式 (3.14)，z=(&) = 
FT() 和 +e(R) 对比 可 得 :xz(E)=]logP,RT(E)=[-logVy,1],9=[c,log8j1。 


第 3 章 最 小 二 雪 泰 孝 欠 识 :的 ， 





例 3.4 的 MATLAB 6.0 程 序 如 下 : 

驶 实际 压力 系统 的 最 小 二 乘 办 识 程序 ,在 光盘 中 的 文件 各 :FLeh3LSek2.m 
clear 负 工 作 间 清 专 
V=[S4.3,61.8.72.4,88.7,118.6,194.0]P= [61.2,49.5,37.6,28,4,19.2,10.1]! 名 赋 初 值 间 显示 .PP 
和 JogP= -4phas JogV+Jogfbeila)=[ 一 JogYy ,lj[alphalog(beita)] =JL*sita %% 注 炎 P,V 之 间 的 关系 
fer i=1:6 2Z( 刘 = logfP(iD) % 种 环 变量 的 了 放 值 为 从 1 到 6, 系统 的 采样 输出 片 值 
End 当 循 环 结 东 
zL=a 和 二 赋值 
HEL=[-Iogf(VID -log(Vw(2 一 IogtV3 ,1 一 JogtVw4) 1 一 JogCVI50 一 Iog(CV(6)1 1] 
% 王 . 冉 值 

允 Calealating Paratreters 
ca 一 HLIsHL; c=invfel)i o9=HLY*EI 导 = 吧 + 二 和 多 计算 被 办 识 参数 的 值 

驶 Separation of Pararneters 
alpha= 忆 人 1) 电 e 为 叫 的 第 一 个 元 素 
betta=expfodf2]] 入 日 为 以 自 杖 数 为 席 的 吼 的 第 二 个 元 素 的 指数 
程序 运行 结果 : 
V= [5.3000， 61.9 的 ，72.4000,， 88.7000，118.6000，194.0000] 
P= [61,2000, 49.5000，37.6000， 认 .4000,， 19.2000，10.1000 上 
ZL= [4.1141 ,3.9020，3.6270，3.3464，2.9549，2.3125] 
-3.9945 1.0000 
-4.1239 1.0O000 
一 4.28322 1.0000 
一 4.4853 1.0000 
-4.7758 1.000 
一 5.2679 1.0000 

]1.4042、 
[sa 
alpha= 1.4042 


beita= 工 .3 和 972e+ Id4 
和 2 和 


仿真 结果 表明 ,用 最 小 二 屁 一 次 完成 算法 可 以 迅速 准 识 出 系统 参数 , 即 x = 
1.4042,8=1.5972e+004。 


3.5 最 小 二 乘 参 数 估计 的 递 推算 法 


前 面 给 出 的 最 小 二 乘 一 次 完成 算 落 适合 于 理论 分 析 。 在 具体 使 用 时 ,不 仅 占 
用 内 存量 大 ,还 不 适合 在 线 辨 识 。 为 了 减少 计算 量 ,减少 数据 在 计算 机 中 所 占 的 存 
储量 ,也 为 了 有 可 能 实时 地 辨识 出 动态 系统 的 特性 ,在 用 最 小 二 乘法 进行 参数 估计 
时 ,把 它 化 成 一 种 既 经 济 又 有 效 的 参数 递 推 估计 ,也 叫做 序 贯 估计 。 





， 全 ， 系统 办 识 及 其 MIATIEAH 坊 真 





3.5.1 递 推算 法 的 概念 


上 所谓 参数 递 推 估 计 , 就 是 当 被 辨识 系统 在 运行 时 ,每 取得 一 次 新 的 观测 数据 
后 ,就 在 朋 次 估计 结果 的 基础 上 ,利用 新 引入 的 观测 数据 对 前 次 估计 的 销 果 , 桶 据 
递 推算 法 进行 修正 ,从 而 递 推 地 得 出 新 的 参数 估计 值 。 这 样 , 随 着 新 的 观测 数据 的 
逐次 引信 ,一 次 接着 一 次 的 进行 参数 佑 计 , 直到 参数 估计 值 达 到 满意 的 精确 程度 为 
止 。 最 小 二 系 递 推算 法 RLS{recursive least squares) 的 基本 思想 可 以 概括 成 


新 的 估计 值 让 (*) = 老 的 估计 值 冯 仆 一 1)+ 修 正 项 (3.441 
3.5$.2 递 推算 法 的 推导 
首先 将 式 (3.35) 的 最 小 二 乘 一 次 完成 算法 写成 
fws= (HA EAIzr = P( 工 ) 玫 JAD 


= [> 4(DO8(DOHT(] [> 4(DR(Dz(i] (3.45) 


定 尽 
卫 -1( 开 ) = 再 区 ,再 ~ >/ 矶 (在 (2 下 Ti 
因 (3.46) 
P-L -1) = BETA TB = > ADRCDRTC 
i=1 
式 中 ， 
ha (| 生 {1) 人 
工 
= (2) 全 = 4 ， (3.47) 
天 工 (7 0 准 ( 开 ) 
RI(1) 4 人 1) 0 
严 工 2 入 (2 
于 1 = 1 ) 友 -1 1 _ 
下 区 下 一 ]) 四 矶 { 开 一 1 
(3.48) 


fi) 是 一 个 列 向 量 ,也 就 是 丽 第 ; 行 向 量 的 转 置 ; P() 是 一 个 方 阵 , 它 的 维 
数 取 雇 于 未 知人 参数 的 个 数 , 而 与 观测 次 数 无 关 ， 如 果 未 知 参 数 的 个 数 是 =， 则 
王 居 ) 的 维 数 为 如 xm 

由 式 (3.46) 可 得 


卫 -… (有 )= 闻 入 (让 (站 址 区 Ci 十 在 ( 天 ) 正 () 生 区 ) 


第 3 说 ”最 小 二 证 和 参 毅 办 识 -6 ， 











= 条- 是 一 1) 十 生 ( 开 ) 天 (到 ) 丰 区 下) 【3.49) 
设 
1 一 [zf(1)z(2) (一 工 [3.50) 
则 
半 ( 一 1 三 【五 [4 有) 
= PE-D[2 AGO58(iz(i] (3.51) 
于 是 有 
二 一 1 
PR -1)6(R -1) = 之 / ACE 下 (i 站 xz (3.52) 
令 
z4 = [zf(1) zt2) 2( 开 )] (3.531 


利用 式 (3.497 和 (3.52) ,可 得 
BE)= (CHEN IEHEAizs = P(E)[ 27 4ACDRG)z(] 


一 PEN[P-LR 一 117 站 ( 才 一 1) 十 内 (天 ) 且 (二 Je 天)] 
一 五 (于 )| [有 -CR》 一 瘦 ( 开 ) 天 (二 ) 下 区 二)] 站 (二 一 工 ) 十 页 ( 天 ) 下 (到 ) 全 二) 


= 让 (二 1) 二 ( 上 ) 丙 (二 )》 胡 (下 [sf 下 ) 一 生 T) 站 (到 一 二] (3.54) 
引进 增益 矩 阵 基 ( 开 )， 定 义 
政 ( 天 ) 一 瑟 ( 二 ) 正 (天 ) 下 (天 ) [3.55) 
则 式 (3.54) 写 成 
站 (RE) = 站 (有 一 1) 上 天 (R)[z(R) 一 大 7() 看 (二 一 革 ] (3.56) 
进一步 把 式 (3.49) 写 成 
惠 ( 开 》 = [P-L(E 一 1) 十 矶 (下 》 天 [天 ) 丰 TO )] 1 [3.57) 
利用 矩阵 反 演 公式 
(4+OCT)-T = -TICUTHTCILTIC) CI (3.58) 
将 式 (3.57) 演 变 成 
三 (下 )= 已 ( 下 一 二 ) 一 且 ( 下 一 全 在 (下 ) 严 《天 )P( 才 一 D)| prCe)P(E - 1 ) 呈 (天 》 + | 


三 (有 一 人 下 (天 ) 下 区 到 ) 
生 TK 开 》P( 下 一 芋 大 [二 ) 十 和 -二 )》 
将 上 式 代 人 式 (3.55) ,整理 后 得 


其 ( 一 下 (一 1 有 (大 ?| CA) PP 人 (天 了 ) 再 (下 ) 十 


一 | 一 jp 一 了 《3.59) 


一 1 
| (3.60) 


*” 66， 系统 办 识 态 其 VIATYTLAB 巷 真 


合式 (3.56).(3.59] 和 (3.60) 得 到 加 权 最 小 二 乘 参 数 佑 计 递 推算 污 RWLSUre- 


eursive weighted least squaresj 
8(p) = (一 1)+ 政 (Ri[Lz() 一 和 (RE) BE 一 1)] 


《3.6] 1) 


-1 
天 (1 二 PE 一 1)( 有 | TUE)P(R TREE) | 


P(E) = [ 工 - 政 (&)RTCE)]P(E 一 1) 
式 中 , 当 4(8)=1, YA 时 ,加 权 最 小 二 委 参 数 估计 递 推 算法 就 简化 成 最 小 一 乘 参 
数 估计 递 推算 法 RILS。 加 权 参 数 科 可 以 在 (0,1] 范 围 内 选择 。 如 果 二 一 ,意味 着 


所 有 采样 数据 都 是 等 同 加 权 的 ,如 果 天 < , 则 表示 对 新 近 获 得 的 数据 销 予 充分 大 
的 权 印 子 , 从 而 削弱 过 去 的 观测 数据 的 作用 。 
式 (43.61) 表 明 , 上 时刻 的 参数 佑 计 值 8() 等 于 (一 1) 时 刻 的 参数 估计 值 


训 付 一 1) 加 上 修正 项 ,修正 项 正比 于 大 时刻 的 新 忠志 (有 )= zx( 有 ) 一 在 I( 有 ) 站 (天 一 
1) ,其 增益 矩阵 下 () 是 时 变 扼 阵 , 己 (8) 是 对 称 筷 阵 ,为 了 保证 下 (有 ) 对称 性 ,有 时 
把 式 (3.61) 第 三 算式 写成 

[P( 才 一 1) 丰 (下 ) [有 (下 一) 下 (天 )] 


1 
正 芳 下 有 (一 其 人) 十 





呈 (一 吾 ( 下 一 1) 一 








-PP( 估 日 - 到 (有 ) 天 有)| 5T(R)P( TCR + (3.62) 


1 

内 ( 开 ) 
这 样 ,在 计算 过 程 中 即 司 有 舍 人 误差 ,也 能 保持 {() 邱 阵 始终 是 对 称 的 。 
在 最 小 二 乘 参 数 估计 的 递 推算 法 (3.61) 或 (43.62) 中 ,根据 前 次 观 浏 数据 得 到 


的 王 导 一 切 及 新 的 观测 数据 ,可 以 计算 出 乓 人 ,从 而 由 站 (一 二 递 推算 出 训 ( 二 )， 
下 一 次 的 递 推 计算 所 需 揭 己 () 也 可 根据 王仁 一 1 和 发 人 ) 等 计算 出 来 。 在 每 次 
的 递 推 计算 过 程 中 ,信息 的 变换 倩 况 如 图 3.4 所 示 。 


新 观测 值 
四 外 






腺 、， A 输 
机 最 小 二 浊 参 数 忧 计 名 
息 PE 一 一 避 扒 算法 一 > P0) 息 






设 定 值 4 人 
图 3.4 矢 数 递 推 估计 过 程 中 信息 的 变换 


第 3 章 ” 盐 小 二 来 套数 办 识 ， 67 。 


图 3.4 表明 . 递 推 计算 需要 事先 选择 初始 参数 6(0) 和 己 (0) ,它们 的 取 值 有 两 
种 选择 方式 。--- 是 根据 一 批 煞 据 利 用 一 次 完成 算法 ,预先 求 得 
| 兰 《了 4 有 1 
【3.63 ) 
刘 (Lo) = P(O)T AU sr 


置 P(0= 王 (7 ,BC0) = 自 ( 了 0) , 式 中 , 工 为 数据 长 度 ,为 了 减少 计算 量 ,Lo 不 宜 
取 太 大 ; 另 一 种 是 直接 取 


人 = ae， a 为 充分 大 的 实数 罗 
E(L0) = g， sg 为 充分 小 的 实 向 量 
因为 
PICk) = 之 4(D)RCE)RTC) 
(3.65》 


了 P-1() 站 () = > (下 Ci)5 人 7) 
根据 式 (3.4S$) , 则 有 
BO= [2 4GOHDATG] [> 4(DRCDz 人 GD] 


= [PAO)+ 和 4 x[P-1(078(0) + 之 上 (iD)Ri)z 人 让] 


《3 .66) 
另外 ,可 用 下 式 作 为 递 推 项 法 的 停机 标准 
站 ) 一 各 (下 一 1 
max| 一 | 妈 B，8 是 适当 小 的 数 〈《3.67) 
机 六 (一 1 








它 意 味 着 当 所 有 的 参数 估计 值 变化 不 大 时 , 即 可 停机 。 最 小 二 乘 递 推 计算 流程 图 
如 图 3.5 所 示 。 


3.6 最 小 二 乘 递 推算 法 的 MATLAB 仿 夏 


例 3.5 ”考虑 图 3.6 所 未 的 仿真 对 象 ,图 中 ,c() 是 服从 .如 0 ,1 分 布 的 不 相 
关 随 机 噪声 。 且 
fz-1) 
CCz 1 


刀 (z 1 


一 | 
AT(z Nt /= 


fx ) = 


"08 ， 系统 者 识 及 其 MIATLAB 纺 真 





4&fz =I1-1.5ciz 1+0.7z 2 = Cez 1) 
BUz-i) 一 1.0x-1 十 个 .xz 








一 标量 信息 王 一 > 向 量 信息 。E==> 拭 阵 信息 





图 3.5 最 小 二 乘 递 推 填 算 流程 图 





忒 向 
圈 3.5 最 小 二 乘 递 推 工法 皋 识 实例 结 稳 图 


选择 图 3.6 所 示 的 辨识 模型 。 仿 真 对 象 选 择 如 下 的 模型 结构 
过 ( 才 ) 十 虽 IE 下 一 ) 十 Ga2( 下 一 2 一 六 下 一 1 十 瑟 克 (下 一 之 ) 十 到 全 
(3.68) 
式 中 ,zz(R) 是 服从 正 态 分 布 的 白 噪 声 .M0,1)。 输 入 信和 号 采用 4 位 移 位 寡 存 器 产 
生 的 M 序列 ,幅度 为 0.03。 按 式 
2 一 1 .5Sz[ 开 一 1 十 有 .75( 开 一 2 一 于 ( 玫 一 1 十 站.S[ 下 一 2) 十 全 (天 ) 
(3.69) 


构造 疡 () 胡 权 阵 取 单 位 阵 4 = 了 利用 式 (3.61) 计 算 下 () 站 (CE) 和 严 (), 计 


可 3 章 最 小 二 滋 参 数 共 座 - 的 . 





算 各 次 参数 辩 识 的 相对 误差 ,精度 满足 要 求 式 (3,67) 后 停机 。 
最 小 二 飞 递 推 舌 法 辩 识 的 MATLAB 6.0 程序 流程 如 图 3.7 所 示 。 下 面 给 出 


具体 程序 。 
工作 间 清 圭 
给 好 序列 的 长 度 工 和 移 位 寄存 器 的 输入 赋 初 始 值 
第 四 个 移 位 寄存 器 的 输出 了 到 反 ， 并 将 幅 值 变 为 0.03 得 到 辨识 系统 的 输入 信号 样本 值 
画册 撞 这 的 输 六 信 导 反 线 图 形 
痊 被 辨识 和 参 散 日 和 王 赋 初 什 
了 


技 照 式 人 3.50) 的 第 二 式 计 算 息 眉 


梓 照 式 G.61) 的 第 - 式 计算 日 ( 昌 
按照 式 (3.60) 的 第 三 式 计 算 下 刁 
技 照 式 (67) 计 算 被 辨识 参数 的 相对 变化 量 


参数 收 租 满足 要求 
























H 
了 


分 离 参数 
画 出 被 辨识 参数 吕 的 各 次 过 推 个 计 值 图 形 


枯 出 臣 闪 识 参 数 吃 的 相对 误差 的 图 形 


图 3.7 最 小 二 乘 递 推 莉 法 辨识 的 MATLAB 6.0 程序 流程 图 





+， 0 ， 承 鲍 状 识 及 其 MIATLAB 仿真 


久 最 小 二 冬 遂 推 工法 辨识 可 序 ， 在 光 开 中 的 文件 名 ,FLeh3RLSeg3 .m 
入 RLeh3RLSez3 
clear % 清理 工作 癌变 量 
L= 13; 入 序列 的 周期 
7L=1 邓 = 是 妆 = 二 4=0; % 四 个 移 位 寄存 器 的 输出 莉 始 值 
fori=1:[L 负 开 始 鼻 环 ,长 麻 为 二 
xl=xotf 妇 ,由 ); 各 第 一 个 穆 位 寄存 器 的 输入 是 第 三 个 与 第 四 个 移 仙 寄存 器 的 输出 的 “或 ” 
他 = 呆 ，% 第 二 个 移 位 害 存 器 的 输入 是 第 一 个 称 位 震 存 器 的 输出 
好 = 刀 ; 第 二 个 称 位 寄存 器 的 输入 是 第 二 个 移 位 寄存 岩 的 输出 
xj 一 妇 ; 第 四 个 称 位 宕 存 器 的 输入 是 第 三 个 称 位 害 存 固 的 输出 
(站 = y41 驶 取出 第 四 个 移 位 害 存 器 的 幅 值 为 0 和 “1 的 输出 信号 , 即 M 序 剂 
iTy6 0.suti- 一 0.03i1 引 如 果 M 序列 的 值 为 1, 办 识 的 输 人 信和 号 到 ”一 在,03"” 
else 记念 = 站 .03; 和 如 果 M 序列 的 值 为 在 "， 因 识 的 输 人 信号 到.03” 
end 马 小 循环 结束 
列 =x 人 =x2 归 = 夺 194= 芭 ; %% 为 下 一 次 的 输 人 信和 号 伐 准 省 
end %% 大 币 址 半 束 .产生 输入 信号 
fgureti yi 双 第 一 个 图 形 
stamtuy ,grid on 允 显 示 出 输入 信 生 径 线 图 并 给 图 形 如 上 阿 格 
zf2)=035zf1)=0; %% 设 = 的 前 两 个 初始 值 为 办 
fork=3:15; 循环 变量 从 3 到 15 
zfk)=1.5* zk 一 这 一 0 了 <EK 一 27+uk-17+0.5xuk-2)1 %% 输 址 采样 信和 





end 
%RLS 遂 推 量 小 二 丧 辨 识 
mi=[0.0010.0010,0010,001]'; % 直 厂 给 出 被 大 识 参 数 的 雪 始 值 , 即 一 个 充分 小 的 实 向 量 
ph0= 1r6a eye4:4);，%% 直 接 给 出 初 姑 状态 癌 , 即 一 个 充分 大 的 实数 单位 息 阵 
蕊 =0.000000005; % 到 相对 庶 差 E= 0.000000005 
<= [al,zers(4,14)]5 % 补 辨识 参数 矩阵 的 初始 值 及 大 小 
e= zerosf4,15); % 相 对 误 莽 的 初始 值 肥 大 小 
for KE=3:15; 鸡 开 始 求 到 
hl= [一 zfK 一 1 一 zE~2)5afk-1yafk 一 2)]5 x=hlis pxhi+li xl=inv(x;，% 开 始 求 K(F) 
kl= 针 hisexl; 名 求 出 玫 的 情 
dl=zlk)-hl'recicl= 加 +ksdli % 求 被 辨识 委 数 
el= cl -ao; % 求 参数 当前 值 与 上 一 次 的 值 的 差 值 
名 = 对 ,/ 加 ; %% 求 参数 的 相对 变化 
民 本 = 人 这; 和 把 当前 相对 变化 的 列 向 量 加 入 误差 矩阵 的 最 后 一 列 
员 = el; 网 新 萌 得 的 参 儿 作为 下 一 次 递 推 的 旧 套 数 
et:yk=cl; 册 把 辩 识 参数 c 列 向 量 加 人 辩 识 参数 矩阵 的 最 后 一 列 
冲印-kl*klsihltpxbh+l] % 求 出 RE) 的 值 
上 =5pli 入 给 下 次 用 
工 e2< = 下 breaki 多 如果 套 数 收 总 情况 满足 要 求 , 练 止 计算 
end 入 小 循环 结束 
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end 邓 大 桩 环 结 东 

ce 伯 显 示 被 辨识 参数 户 其 误差 4 收 竹 ) 情 况 

名 分 元 雁 数 

时 一 台 本 = 王 ee 人 = 4 
f 证 uret27; 多 第 一 个 图 形 

i= 1315+ 和 % 兢 坐标 从 工 到 地 

Pietfial pa iib gai 2 和 画册 ad,a2,bli,bz 的 各 次 辨识 结果 

titleg "Parameter Identification with Recuraive Least Squares Method'i % 图 形 标题 

figuret33+ 向 第 三 个 图 形 

i= 11; 纺 横 坐标 从 1 到 15 

Piotfi,eal, risea2 gtiyebl ,bieb2r:) % 面 出 ai,bl,t2 的 各 次 兰 识 结果 的 收 敏 情况 
titleg jdentification Precision ) % 图 形 标 题 


程序 运行 结果 : 

> > 

= 

0.0010 0.0010 -0.4984 -1.2328 -1.4951 -1.4962 一 1.4991 


0 

C 人 .00 包 0.0010 一 0-235 0.6913 .6p41 站 .09 
0.0010 0 0.23 的 1 .2497 1.0665 1.0017 1 .的 20 1.0002 

口 ” 一 站 .2489 0,37500 0.56068 0.5024 0,5016 ”0.3008 


-1.434998 一 1 特急 一 1.5000 一 1.5000 -1.5000 一 1.4998 一 1.4999 
0.0998 修 . 有 599 由 .7000 0.7000 0,70D00 D,.7000 一 0.7000 
个 ,29 0.D998 0.9999 站 .名 鸣 .9999 了 .9999 站 -9999 
0.5002 D.S002 0.5000 站 .5000 0.5000 “0.5000 0.3000 


0 0 -499.4200 1.4734 0.2129 0.0007 0.0020 
0 0 0 0 -235.916 -3.916 0.0042 0.00m 
0 0 249.8612 3.9816 -0.1466 -0.0507 0.0003 -0.0018 
0 0 -249.86 人 2 -4.0136 -0.2443 -0,1143 -0.0007 -0.0016 


0,.0004 0.0000 0.0001 0.0000 -0.0000 -0.0000 人 0.0000 
0.0012 0D.0001 0,0001 一 0,0000 0D.0000 0.0000 0.00m 
-0.0003 一 0.0001 0.0001 0.0000 0.0000 moon 一 1.0000 
一 有 .0012 -0.0001 00004 0,0000 -0D.0000 0.0000 一 0.0000 


表 3.2 最 小 二 乘 递 推 草 法 的 国 识 铺 果 














条 数 el 全 3 必 1 而 
直 值 一 ,5 全 .9 1.0 0.5 
必 计 值 ~ 了,4999 们 .了 人.0909 四 .5000 





最 小 二 乘 递 推算 法 的 辨识 结果 如 表 3.2 所 示 ,程序 运行 曲线 如 图 3.8 所 泵 。 
仿真 结果 表明 ,大 约 递 推 到 第 十 步 时 ,参数 辨 识 的 绩 果 基本 达到 稳定 状态 , 即 al = 


-一 -一 -下 一 一 


， 扩 ， 系统 鼠 识 玉 其 MATLAB 集 走 





-1.4999,a2s=0.7000，5 =0.9999, 5 =0.5000。 此 时 ,参数 的 相对 变化 量 开 毛 
0.000 000 005。 从 整个 辨识 过 程 来 看 ,精度 的 要 求 直 接 影响 辨识 的 速度 。 虽 然 最 
终 的 精度 可 以 达到 很 小 ,但 开始 阶段 的 相对 误差 会 很 大 ,从 图 3.8(3) 图 形 中 可 看 
出 ,参数 的 最 大 相对 误差 会 达到 3 位 数 。 
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图 3.8 最 小 一 溢 递 推算 法 的 参数 辨识 仿真 
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3.7 增 广 最 小 二 乘法 


考虑 SISD 的 动态 系统 , 辩 识 系统 的 结构 如 图 3.9 所 示 。 

图 3.9 中 ,输入 xz) 和 输出 =(R) 是 可 以 观测 
的 :Gt* 1) 是 系统 模型 ,用 来 描述 系统 的 输 人 输 
出 特性 ,y(E) 是 系统 的 实际 和 输出。 六 (= ) 是 噪声 
模型 ,z(8) 是 均值 为 零 的 不 相关 随机 虽 声 。 通 常 











-1 -1 芭 愉 JJ 用 zx 有 
人 fw1) 一 2， Tc 一 Pts-) 
4(z 1 Csz ) 图 3.9 SSO 辨识 系统 的 结构 
(3.701) 
式 中 
A(z TD) 一 1+etz 二 ax 十 必 十 Go 
再 (xz 一 玉 1z 十 5 十 ，… 十 De (3.71) 
CCz 1 一 于 十 C1 十 CD 十 十 cr 
3.7 
1 一 荆 十 人 1 十 研 2 十 。… 十 dos 《 2) 
若 SISO 系统 采用 平均 滑动 模型 , 即 
C(z 1) = (zc ) 
册 (z sf 友 ) 一 古 (z-1ytfE) 干 站 (ga 人 (3.73] 


若 候 定 模型 阶 次 xm 和 rz 已 经 确定 , 则 这 类 问题 的 辨识 可 用 增 广 最 小 二 
乘法 ,以 便 获得 满意 的 结果 。 今 
8 = [alaz2an BiB2BosGayd2 
本 = zx( 开 一 上, 一 z(R 一 me)， 《3.74) 
(1 一 1) 一 并 
将 模型 (3.73) 化 为 最 小 二 乘 格式 
z( 且 ) = 天 玖 二) 可 十 呈 [ 天 ) (3.75) 
击 于 (有 ) 是 白 嗓 声 ,所 以 和 用 最 小 二 乘法 即 可 获得 参数 8 的 无 俩 合计 。 但 是 数 
据 向 量 产 (E) 中 包 舍 着 不 可 测 的 曲 声 量 (8 一 1:o( 有 -9) 它 可 用 相应 的 人 
讨 值 替代 。 置 
直 ( 直 ) 一 [一 zf 一 二 一 交 ( 有 一 下) 让 (下 一 1 
了 《和 一 185) 区 和 一 二 (一 7) 
式 中 ,让 =0,k <s0; 当 天 >>0 时 ， 


( 皮 ) = 2(R)》 一 玫 T() 让 (一 1) (3.77) 


《3.76) 


， 94， 龟 统 图 识 及 其 MIATIAE 坊 真 








或 
圳 (下 ) 一 z(R) 一 天 TOR) 站 (天 ) (3.78) 
杠 据 式 43.61) 立 即 就 可 以 写 出 增 广 量 小 二 乘 递 推算 法 RELSfrecursive extendeq 
]east squaresj 
亩 (天 ) 一 曾 ( 1) 二 政 (gf 二) 一 下 IE) 看 (二 一)] 
耻 ( 开 ) 一 可 (1 上 且 (下 )[RTCRJPIR 18) +17 ACE 《3.79) 
PP(R)》 一 [ 开 一 下 (下 ) 丰 区 下 让 有 ( 雪 一 1) 


如 果 六 -1 , 即 所 有 采样 数据 都 是 等 同 如 权时 , 增 广 最 小 二 乘 递 推 算法 RELS 可 以 
写 为 


臣 ( 于 ) 一 王 (下 一 1) 天 (下 )[ 下 区 二 )( 天 一 二) 天 (二 ) + 1 (3.80) 
有 (天 ] 一 [ 开 一 政 ( 开 ) 下 区 下 )] 亚 (下 一 1) 

增 广 最 小 二 科 递 推算 法 (3.79) ,扩充 了 最 小 二 乘法 的 参数 向 量 8 和 数据 店 量 
人 的 维 数 , 把 噪声 模型 的 辨识 同时 考虑 进去 ,因此 被 称 为 增 广 最 小 二 乘法 。 最 
小 二 乘法 的 许多 结论 对 它 都 是 适用 的 , 但 最 小 二 乘法 只 能 获得 模型 的 参数 估计 。 
如 时 噪声 模型 必须 用 Dfz -1)vp(R) 表 示 时 ,只 能 用 RELS 算法 , 方 可 获得 无 偶 估 
计 , 这 是 RLS 算法 所 不 能 代替 的 。 此 外 ,以 后 的 章节 还 进一步 表明 增 广 最 小 二 乘 
法 又 是 一 种 近似 的 极 大 似 然 法 。 


3.8 增 广 最 小 二 乘 辩 识 的 MATLAB 仿真 


例 3.6 考虑 图 3.10 所 示 的 仿真 对 象 ,图 中 ,w(R) 是 服从 .人 0 D 分 布 的 不 
相关 随机 噪声 。 


He 一 站 (下 一 1) 二 朴 (R)( 开 ) 一 是 攻 友 ) 相 (一 二 


1 站 fx- 一 1 
-1Y 1] 一 汪 二 
je =1T-1.saiz-1+0.7z2 = C(z7) 





图 3.10 增 广 最 小 二 乘法 
瓣 识 实例 结构 


B(z-) 一 0Ozr1+0.5z 
Dfz-) =1 一 zz 二 0.2z 一 
模型 结构 选用 如 下 形式 
& 开 十 CI1( 一 直 十 吕 玉 下 一 全 
一 昌 ] 旭 (下 一 1) 十 而 让 (下 一 2 十 可 (二 十 三 下 一 1 十 好人 (一 了 
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增 广 最 小 二 乘 辨识 程序 流程 如 图 3.11 所 示 , 递 推算 法 的 辨识 结果 如 表 3.3 所 
示 ,程序 运行 徊 线 如 图 3.12 所 示 ,MATLAB 6.0 程序 如 下 。 


< Te > 
ET 


辣 改 笋 福 足 要 求 ” 





Y 
显示 被 舞 识 参数 、 轩 认 精 度 、 输 出 采样 、 系 统 实际 输出 、 模型 界 出 


画 出 系统 的 实际 输出 、 输 出 采样 及 模型 输出 


图 3.11 增 广 最 小 二 靳 递 推算 法 辨识 的 MATLAB 6.0 程序 流 穆 图 


6， 


系统 辨识 及 其 MATLAB 仿真 








如 10 320 ， 30 40 









1 只 Emor 研 员 1 


尼 10 20 30 4 辐 6 
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101System RESponse Without Noises 
必 
一 | 从 = 业 一 一 -一 


人 


] 3 40 50 0 
] 括 晶 和 50 60 
站 ]0 站 御 40 60 

0 50 二 


0 2 
10 - - 
0 
-10 
好 3 
10[ NETRESRORR WiHR ROLE 
0 
-10 
20 3 
20 - 一 
1 
-20 





Model Respaonse 凤 ithoat Moi 


0 1 站 20 了 
Fi 这 ,4 RespotsSecs 


图 3.12 增 广 最 小 二 磁 递 推荐 法 辩 识 仿 真 


% 增 广 最 小 二 冬 辨 识 程 序 ,在 光盘 中 的 文件 名 ;FLeh3ELSeg4 , 
clear 
L= 铝 ; %4 位 称 位 害 存 器 产生 的 M 序列 的 局 期 
7 = 上 ; 陀 =1; 3= Tiy4=0; %4 个 移 位 寡 存 器 的 输出 初始 值 
for ii 一 1 :1 
xz=xorf1, 94); 凤 第 一 个 移 位 需 存 器 的 输 和 信号 
xz=Yyli 和 第 二 个 移 位 寡 存 器 的 输 人 信和 号 
x= 六 ; % 第 三 个 移 位 寄存 回 的 输 人 信和 号 
双 = 妥 ; % 第 四 个 雹 位 寄存 器 的 输 人 信和 号 
(三 风 ; 和 第 四 个 移 位 害 存 器 的 输出 信 身 ,M 序列 , 幅 值 "0 和“ 二， 
ELyYt02>05u0= 一 1 9 序列 的 值 为 "1 时 ,办 识 的 输入 信号 取 “ 一 1 
elseuf 切 =1; 站 M 序列 的 值 为 "0" 时 , 辩 识 的 输入 依 号 取 1 
erld 
y1=xli2= 3= 好 ;由 = 友 ! % 为 下 一 次 的 输入 傅 号 准备 
end 
fguref1); 各 画 第 一 个 图 形 
subpijot2 ,1,1T);， 所 面 第 一 个 图 形 的 第 一 个 子 转 
stetmf ugnd on %% 夯 出 M 序 列 输 人 信号 
v=tandnf160) % 产 生 一 组 的 个 正 态 分布 的 随 雪 唱 声 
subplori2.1,2)1 %% 画 第 一 个 上 形 的 第 二 个 子 图 
plerfv) ,grid on 负 画 出 随机 时 声 售 号 
uiy 台 显 示 输 人 信和 导 和 吃 声 信和 号 
z= zeros(7 了 ,60);z=zemngsf7,50);2m= zerosf7 60);2n0d= zeros(7, 的)，% 输 出 采样 矩阵 、 下 考虑 嗓 声 时 系 
久 统 输出 卸 阵 .不 考虑 噪声 时 模型 输出 些 阵 .模型 给 出 扼 阵 的 大 小 
zf2 一 0; zf = 昌 i 呈 27= 和 rs(17=0y amf27=03 mmfl)=0y mdt2)=0i zmndtt)=0 % 输 出 采样 .不 
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?78 ， 系统 办 识 及 其 KMIATLAB 仿真 





蝗 考 碟 品 声 时 系统 输出 .不 考虑 噪声 时 模型 榆 出 ,模型 输出 的 初 什 
c= [0.00L 0.0010.0010.0010,.0010,.0010.001] ，% 直 接 给 出 被 辩 识 绑 数 的 坷 始 值 , 即 一 个 充分 小 的 
实 向量 
= i06s eyel7,7); 负 直 接 给 出 初始 状态 P , 印 一 个 充分 大 的 实数 单位 矩阵 
下 =10.00000000005; % 相 对 误差 和 = 站 .000000005 
ce= [四 ,zerost7,14)];， 被 因 识 参数 矩阵 的 初始 值 及 大 小 
e= zetosf7,15); 入 相对 误差 的 初始 伪 防 大 小 
fork=3: 的 ; 入 开始 求 到 
区 区 1.5x% KK 一 -0D7 了 sz 人 KE 一 2)TekK-1)+0.SwufE 一 2)+w(K) 一 wk 一 1+02xwvfk 一 215 
名 系统 在 M 序列 输 人 下 的 输出 采样 倩 号 
hl=[-zfK-1), -zk-2ufk 一 latk-2)vfkyvtk- ivtk 一 2 ] 3 驶 为 求 KOk) 作 准备 
一 hx#I+h+1ly xl 一 invx)i kx 关 hlxxli 遇 及 
由 =2fky- hisai cl=o+kltr 中 ; 办 识 参 数 c 
zt= -1.5xztk~1)+0.7xztk-2)+ofk-ti+05wufk-2); % 系 统 在 M 序 列 的 输 人 下 的 输 
驶 出 响应 
zmlt)=[ 一 2 一 旺 -zfE-2)utk 一 1) ,ofk-2) [elflyielf2)yelt3yel04) 上 模型 在 M 序 
级 列 的 输 人 下 的 输出 啊 应 
zndfk)=hl xceii 铅 模型 在 M 序 列 的 输 人 下 的 输出 响应 
中 = el 一 m 习 = 人 lv; 各 求 参数 误 营 的 相对 变 北 
ef 名; 
中 =eli 入 给 下 一 次 用 
cf: ,kky= eli 名 把 递 推出 的 辨识 参数 c 的 列 癌 量 如 人 大 识 参数 眠 阵 
pl 一 区 一 klseklr[bhlrpsh1li 和 finqptt) 
到 =L; 外 给 下 次 用 
证 虹 < =E breaki % 若 收 敏 情况 满足 要 求 ,终止 计算 
end 入 判断 结束 
end % 循 环 结束 
c，e， 久 显示 被 辨识 扼 数 及 参数 收 区 情况 
z，2a，zm 折 显 示 输 出 采样 值 .系统 实 际 输出 值 , 提 型 翰 出 值 
允 分 离 变量 
让 =efl ;和 =cl2 bi=e3 =ed413 用 分 离 出 车 、 过 ,bl、 民 
d1L=et5 ,ii 虹 =ef6 和 = 败 分 离 出 而、 业 . 笛 
apl=ef1 ii eta=ef2iehbl=e3.:)yeb2=efd4)) 允 分 高 出 天 、a2. 0 归 的 收 禾 情 况 
edl =el5,: ;edi2=et6.); ed 一 et? 和 分 离 出 由 . 业 . 委 的 收效 捕 沈 
figuref2)4 名画 第 二 个 图 形 
i1: 的 ;petfi 生生 玫 ,rblbi 达 ,bd 二:i 归 , + ) 物 面 出 各 个 被 辩 识 大 孝 
Hider Pararmneter Identification with Recursive Least Squares Method  ) % 标 题 
figuret3]; 1i= 1:60; % 曾 出 第 三 个 图 形 
Piptfjsesd ea2yri abl biyeb2 bi isedly gsied2: giled2yr+ ) 双 画 出 各 个 参数 收 伍 情 况 
titer Identificstion Precisiomy 哆 标 赴 
figaref47;， subrlot(4,1,1); 的 画 出 第 四 个 图 形 ,第 一 个 子 图 
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i= 1: 的 ;blotfi zstnyzry 负 画 出 帘 办 识 系统 在 没有 了 噪声 情况 下 的 实际 输出 栅 应 

subpletf4,1,215 ii=1:60;plotfiz(i,E) 抽 第 二 个 子 图 , 画 出 被 理 识 系统 的 采样 输出 响应 

subblog4,1,3)i=1: 的 pletiamnti7,b' 多 第 三 个 子 图 ,其 出 模型 含有 了 只 声 的 输出 响应 

sabplotfd4,1.411 1=1:603pilotfi zsf 人 by 包 第 四 个 子 图 ,而 出 异型 去 除 噪声 后 的 输出 啊 认 

程序 执行 结果 

> > 

= 

站 , -1 -1 -1-1.1.10 -111-1, -1 -11 -tl -1 -111 ,一 1, -1]1， 
区 -11,-1 -iT11-1,11,-1 一 11-11.-],-1,-1 -1,1.1 1 -141 -1 一 1， 
%1, -1] 


豆 一 





[1.1418 ,1.55 雪 ，1.3836，- 0.7381,0.4427 ,0.9111，-~ 1.0741 0,2018,0.7629，- 1.- 站 纪 ，- .站 各， 
0.7782 ,一 0- 的 63, 站 .5245， 1 .3643， 0.4820，- 0.7871,，0.7520，- 站 .1009，- 0 .85162，2.0941,， .0802， 
雹 -0.9373.0.63S7 ,1.6820，0.5936，0,7902，0.1053， 一 站 .1386 .0.8709，- 站 .1948.0.0755， 一 虽 . 了 2 的 ， 
遇 -0,6855, 一 0,2684 ,一 1.1883.0 .2486 ,一 0.1025 .一 站 .010， 一 2 .2 计 76 ,一 0.5108 0.2492 日 . 匠 97， 
9%0.1792 ,一 .0373,， 一 1.6033.0.3394 , 一 站 .1311 .0.4852 ,0.5988 ,一 0.03600 -3253，- 0.3351，-0.3224， 
断 一 在 ,3824 ,一 站,9534 ,0.2336,1.2352 ,一 0.5785, -和 .5015] 


一 
0. 扣 区 0.0010 一 0-2780 一 0.9025 -09390 一 0.8620 
0.0010 0 0D.O010 0.0010 一 0.0734 站 .2661 一 必 . 1t99 
0,.001l0 0 和 .0059 之 ,43 的 0.5300 人 .5293 0.9458 
0.0010 0 ,0572 .8186 0.8500 站 ,5630 二 .1357 
0.o010 0 0.0396 日. 7342 由 .5S417 0.5516 0 ,3847 
0.0010 0 一 1.0894 一 0.5981 一 0.3420 -0.4456 一 0.4044 
D.0010 0 -00655 一 0-77 的 一 D.85 阅 一.7412 一 和.4306 
-1.123 和 6 ”一 1.5000 一 1.5000 一 1.5000 
0.3239 四 ,7000 0.700 0.70O00 
0.3402 1,.0000 1.0000 1 .0000 
1 . 2957 四 ,5000 0.5000 0,.5000 
0.2459 1.0000 1.0000 1 .0000 
一 站 .5443 一 1.0000 一 1.0000 一 1.0000 
一 虽 .1973 0.2000 0 20 0-2000 


斤 昌 一 279. 叫 26 2.2355 0.0404 一 0.0820 
必 和 人 一 4.33764 2.6263 0.5493 
监 48 ,2212 6,7007 00.1622 一 .0013 0 ,7868 
昌 一 征 : 好 本 15,3 基 32 0.0384 并 .9163 0.2915 
站 一 各 .5566 一 10.2283 一口 .2021 站 .0183 一 0.3027 
眉 一 名 .3556 .6936 -0.4282 了 .30293 一 0.0925 
站 一 的 .4754 10.9059 0.0096 -0.1354 “0.3920 


各 巧 和 二 避 总 
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0.3035 0.33 和 0.0000 “0.000M 
-3,.7189 1.1479 -0.0000 0.0000 
-0.4289 0.8512 10.0000 0.0000 
0.1613 一 0.6141 -0.0000 -0.0000 
-0.3607 ”3.0663 “0.0000 “0.0000 
1.0880 01844 -0.0000 0.0000 
-0.5619 -2.0t30 0.0000 0.0000 
2 一 
各 ,0, -0.4400. - 3,9913,， -5.7014，- 6.9415，- 了 .9178， -3.9097，1.4543 ,2.4075，3.58]10，6,.6598 ， 
在 .0079 .3.5364 ,过 .44376 一 站 -096 ， 一 了 衬 72 ,一 了 .317,， 一 4.4100. 一石.9915， 一 在 . 作 233, 一 5.1 册 ] ， 
蝗 一 3.6094,1,.7476.5.5068,6.5756,8.0416.6.3933,2.3S50，0.6078，- 2.3342， 一 2.9824 , - 3.980?7 ， 
听 一 和 .3271 ,一 6.69324. -8.7267, 一 5,5221,， -2.5583,2.1343,2.3062 ,4.1939 ,56.4870,，6.3125.3.2879， 
六 0.8703 ，- 3.0262 ,一 2.7133, -3.2428, -3.7807, -4.8137 ,一 6.6618, -5.5921, 一 2.9025,1,1385， 
入 当 ,1125 3 7363 , 硬 ,0362，. 了 499 ,2.6324 ,人 .0479] 
轴 = 
[0,0, 一 0.5000, 一 0,8401,4.1789,4.2583 6. 所 12,8.3677,1.8920, -5.4182, -2.0932, 一 2.1863， 
-了 .9830, -5.8500,，-0.5991.-1.6810,.2.3509,2.09533 .0.3337,3.4925.5.9002.4.5409,6.0108， 
入 2.8415, - 5.6480 ,一 昌 .5369， 一 4.5 和 87， 一 7 了 ,9 由 ,一 5.4608,， 1 ,4428.0 ,2369 ,4 ,4268 ,2.3396,2 ,3834， 
和 4.0042,4.6696 ,8.9054 ,5.1745.0.7719, 一 5.4923,， -1.4653, 一 3.1765,， -了 .2947, 一 6.4279, -0.0129， 
物 0.4961,.S.6486,1.4516,1.4649 ,1.9010,3.0741 ,7 ,1232,.5,2248,1 .9393 ,一 4.2395,， -3.3718， 
牟 -1.925S8, 1.9389， -7 了.3905,1.2763 ] 
一 
[0,0, -0.4400, -3.9913, -5.7014, -6.9415, -了 .8178, - 3.9097 .1.4543,2 .和 75,3.5810,6.5598 ， 
听 6.0079,3.5364,2.4376 ,一 0 ,0964 ,一 2,3472, 一 2.3178 ,一 4.4100 ,一 5.9915, -6.0233, 一 5.8181 ， 
和 一 3,6094.1.7475 ,5 .5068 ,5755 8 ,人 416 ,63933 ,2 3530 ,0.6078,， 一 2 3342， 一 2.9824 ,一 3,9807， 
及 -了 .5271 ,一 6.6924，- 有 .7267， 一 6.5221，-2 .5583,2.1343,2.3062,4,1939 ,6,.4870,6.3125，3.2878， 
牟 0,8703 ,一 3.0262, 一 2.7133, 一 3.2428, 一 3.7807, -4.8137 ,一 6,6618, 一 5,5921, 一 2.9025,.1385， 
名 3.1125,3.7363，6.0362,6.7499,2.6324,0,0478] 


囊 3.3 增 广 最 小 二 滋 递 推 莽 法 的 国 识 结果 


又 数 - 可] 2 上 1 避 > 杷 1 研 ? 中 3 
真 慎 一 ] .5 站 .了 1 .0 0.5 人 1. 一 地 0.2 
个 计 值 -1. 日, 了 1.0 0 .5 1.0 -1.0 .2 





仿真 结果 表明 , 递 推 到 第 九 步 时 ,参数 辩 识 的 结果 基本 达到 稳定 状态 , 即 al = 
-1.5000， co =0.7000, 呈 1=1.0000，252 =0.5000， 32; =1.0000,，d = -1.0000， 
23=0.2000。 此 时 ,办 识 参 数 的 相对 变化 基 BE<0.000 000 005- 与 最 小 二 乘 递 推 
算法 相 比 , 增 广 最 小 二 乘 递 推算 法 虽然 考虑 了 噪声 模型 ,同样 具有 速度 快 .办 识 结 
果 精 确 的 特点 。 
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3.9 广义 最 小 二 乘法 


设 SISO 系统 采用 如下 数学 模型 


AUz-Dz(k) = BUzriya(Ry 站 > (3.81) 


描述 , 式 中 ,xt) 和 =*(8) 表 示 系 统 的 输入 和 输出 ; z(&) 是 均 信 为 零 的 不 相关 的 随 
机 哄 声 ; 且 
ftz 1)=1+aiz +ea2z 十 十 Cn 
B(z 一 和 (3.82) 
Ctrl 一 十 cx 十 CC 十 …: 十 Cr 区 
才 假 定 模型 阶 次 mr ,mu 和 zz 已 经 确定 , 则 这 类 问题 的 辨识 可 用 广义 最 小 二 科 
法 RGLSY tecutrsive genetaljzed least squares) , 以 便 获 得 参数 的 无 偏 一 致 佑 计 。 令 
人 = CUz lz( 友 ) (3 83 
2 和) 一 CCz Tt( 二 ) 
及 
站 一 [alia2an :Blyb2 
上 三 [一 之 Ff 开 一 划一 人 (一 9) 亲 二 一 下 六 二 一 2 ] 工 
(3.84) 
将 横 型 (3.81) 化 为 最 小 二 乘 格式 
xz 六 玫 ) 一 在 六 到 ) 和 十 苹 ( 开 ] (3.85) 
由 于 zw() 是 白 嗓 声 ,所 以 利用 最 小 二 乘法 即 可 获得 参数 8 的 无 侦 佑 计 。 但 是 数 
据 向 量 人 Ctz ) 并 不 知道 。 
为 此 需 槛 用 人 选 代 的 办 法 来 估计 C(z )。 


ef )] 一 Ce et 【3.86) 
置 
好 ( 二 ) = [elyczy 和 ycn 
| 【3 .871) 
下 ( 才 )》 一 [一 2 人 (下 一 1 一 (天 一 开 ) 二 
就 把 噪声 模型 式 (3.86) 也 化 成 最 小 二 乘 格式 
ef) 一 下 区 类) 本 十 双 [ 天 ) (3.88) 


由 于 上 式 的 噪声 已 是 白 虽 声 ,所 以 再 次 利用 最 小 二 乘法 可 获得 噪声 模型 参数 8 的 
无 偏 估计 。 但 是 数据 向 量 久 () 依 然 包含 着 不 可 测 的 噪声 量 e( 开 一 1)，…，2( 一 


82 -。 系 久 帮 识 友 其 MIATLAH 做 真 





?xz)， 它 囊 用 相应 的 合计 值 代替 , 置 


天 ( 开 ) 二 [一半 ( 开 一 1 一 玄 (二 一 天 让 工 《3.89) 
了 式 中 ,ES0. Ef(kEJ=0; 当 胡 30 时 , 按 下 式 
ER) = zx() 一 下 区 天 ) 大 (3.90) 
计算 , 式 中 
严 ( 开 ) 一 [一 和 ( 开 一 1 一 人 二 一 如 》 区 天 一 1 …,zf 一 工 
(3.91) 


综 上 分 析 ,加 权 广 义 最 小 二 乘 递 推 算法 可 归纳 成 : 
[站 (RE) 一 让 (并 一 1) 十 政 f 开 )[ zfKR) 一 上 人 拱 开 (天 一 1)] 


一 
Kr(D = PE DUKE)PE -DUO + | 
| = [了 工 一 下 F( 丰 ) 真 丰 大 7 也 r( 开 一 芽 ) ao) 
3.92 
康 (E) = 记 ( 直 -1)+ 下 (RD)[E(E) 一 下 玖 天) 站 (一 1 





下 (有 = 本 (人 一 站 外 (6| 83CA) PE -TD 机 (ED) | 
和 (RE) = [ 工 一 天.( 开 ) 丰 TIR)] 了 (一 1) 
当 所 有 采样 数据 都 是 等 同 加 权 , 即 4 = 时 ,加 权 广 六 最 小 二 乘 参 数 估 计 
递 推 算法 就 简化 成 广义 最 小 二 乘 参 数 佑 计 递 推算 法 RGLS。 
广 祥 最 小 二 乘 递 推算 法 是 一 种 选 代 的 算法 ,其 步 双 是 : 
(1) 给 定 初始 条 件 
B(0) = 55 为 充分 小 的 实 向 量 ) 
Pr(0) = a2f(a 为 充分 大 的 数 ) 
让 (0) = 
王 .0) 一 于 
(2) 利用 式 (3.83) ,计算 zff(R) 和 zar( 天 ) 
{31 利用 式 (3.84) ,构造 让 (ED); 
(4 利用 式 (3.92) 前 三 个 式 子 递 推 计算 奋 (上 )j 
5》 利用 式 (3.90) 计 算 z (RE) ,并 根据 式 (3.89) 构 造 琵 (R 11 
{6) 利用 式 (3.92) 后 三 个 式 子 递 推 计算 康 ( 开 ); 


{7)》 返回 第 (2) 步 进行 和 代 计算 ,直至 获得 满意 的 辨识 结果 。 
以 上 分 析 表 明 ,广义 最 小 二 乘法 的 基本 思想 是 基于 对 数据 先进 行 一 次 滤波 预 


《3.93) 


-一 -一 一 一 一 一 一 -一 一 一 nm 
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处 理 , 然 后 利用 普通 最 小 二 乘法 对 滤波 后 的 数据 进行 辨识 ， 如 时 滤波 模型 选择 得 
合适 ,对 数据 进行 了 较 好 的 白色 化 处 理 , 那 么 直接 利用 普通 最 小 二 乘法 就 能 获得 无 
偏 一 致 估计 。 这 种 站 波 模型 可 以 是 预先 选 定 的 固定 模型 ,出 可 以 是 动态 变化 模型 。 
由 于 实际 问题 的 复杂 人 性 ,要 选择 一 个 较 好 的 而 定 模 型 用 于 数据 的 白色 化 处 理 一 般 
是 比较 困难 的 。 广 义 最 小 二 乘法 所 用 的 恋 波 模型 实际 上 是 一 种 动态 模型 ,在 整个 
选 代 过 程 中 不 断 靠 但 差 信息 来 调整 这 个 涉 波 模型 ,使 它 逐 渐 通 近 于 一 个 较 好 的 让 
波 模 型 ,以便 对 数据 进行 较 好 的 白色 化 处 理 , 使 模型 参数 估计 成 为 无 偷 一 致 估计。 
理论 上 说 ,广义 最 小 二 乘法 所 用 的 动态 模型 经 过 几 次 迷 代 调整 后 , 便 可 对 数据 进行 
较 好 的 白色 化 处 理 。 但 是 , 当 过 程 的 输出 信 只 比 较 大 或 模型 参数 比 校 多 时 ,这 种 数 
据 白 色 化 处 理 的 可 靠 性 就 会 下 降 。 此 时 ,准则 枉 数 可 能 会 出 现 多 个 局 部 收 伍 点 , 辨 
识 结果 可 能 使 准则 函数 收敛 于 局 部 要 小 点 而 不 是 全 局 极 小 点 。 这 样 最 终 的 辨 识 结 
果 往 往 也 会 是 有 惕 的 。 

例如 ,考虑 仿真 对 象 

(大 ) 十 如] 区 [ 遇 一 十 品 2 下 一 2) 一 盏 政 ( 玫 一 1) 十 站 2 一 2 十 外 下 ) 

1 ++ elef 点 一 | 二 ce 是 一 2 一 站 ( 玫 ) 

利用 (3 ,92) 递 推算 式 获得 的 辨识 结果 如 表 3.4 所 示 。 若 将 此 例 的 乓 识 结果 与 
最 小 二 乘 递 撞 算 法 相 比 较 , 可 以 发 现 它 们 的 结果 基本 上 是 一 致 的 。 这 是 闵 为 本 例 
的 仿真 对 象 也 采用 了 图 3.6 所 示 的 系统 , 它 相 当 于 式 (3.81) 中 的 噪声 模型 
ctz 已 =1- 这 种 仿真 对 象 利用 最 小 二 箭 法 已 可 获得 无 偏 一 致 佑 计 , 但 广义 最 小 二 
乘 同时 又 能 给 出 噪声 模型 的 参数 估计 值 。 由 表 3.4 知 ,此 例 的 噪声 模型 估计 为 
CCz sl, 它 和 仿真 对 象 的 噪声 模型 是 相符 的 。 如 果 一 个 系统 必须 用 式 43.81) 
的 模型 来 描述 , 且 C(z 0) 天 1, 这 时 就 不 能 使 用 最 小 二 乘法 了 ,必须 利用 广义 最 小 
二 乘法 , 方 可 获得 无 偏 一 致 估计 。 

家 3.4 广内 最 小 二 乘法 辨识 结果 








参 数 已] 上 半 业 1 吾 2 研 1 切 
真 人 一 1 .5 ,7 1.0 0 .5 妖 , 有 省 
个 计 值 -1.5107 “0.7068 1.046 10,.4963 ”0.0114 -0.00 科 


3.10 多 级 最 小 二 乘法 
考虑 SISO 系统 模型 


_ __ 1 
交 [ 吉 -12zfR) 二 理 fz JE) 十 让 (3,94》 


-一 ”一 一 一 一 -rr 一 


"” 84， 系 钝 认识 及 其 MATLARE 仿 趴 





当 信 品 比 相对 较 大 时 ,采用 广义 最 小 二 乘法 可 能 会 出 现 窗 个 局 部 收 敏 点 ,使 帮 识 结果 


难以 收 委 到 全 局 极 小 点 。 解 决 这 个 问题 的 方法 可 用 多 级 最 小 二 乘 靶 MLS(multi-stage 


ijeast squares)。 一 般 说 来 ,多 级 最 小 二 乘法 包含 三 级 辩 识 过 程 , 如 图 3.13 所 示 。 
和 第 二 缀 








图 3.13 老 级 最 小 二 乘法 


3.10.1 辅助 模型 参数 辨识 


辅助 模型 参数 辨识 是 多 级 最 小 二 科 辩 识 的 第 一 级 。 将 模型 (3.94) 与 成 
册 (zTCfz1yztR》y 二 旦 (erCCz Te) 十 训 ] 【3.95) 


少 


忆 fx 宕 4AfzUCCz 一 1 十 ce1 包 1 十 …- 十 ea tn 
Fr ) 一 Btz ICCz 人 一 三 z 十 -… 十 所 


《3.96) 
则 模型 (3.9%5) 写 成 
吾 f(z 1)z( 玫 ) 二 下 (z 1)E( 开 ) 十 全 (二 ) 《3.97) 
上 式 称 作 辅 助 模型 。 设 
1 一 | ee en ya 万 , 亡 ， 记 
(一 [一 并 一 人 (一 
(3.98) 
则 模型 (3.97) 化 成 最 小 二 乘 格式 
zx 区 表 )》 一 在 拒 天 ) 和 | 十 本 (下 (3.99) 
由 于 z( 丰 ) 是 白 噪 声 ， 故 利用 最 小 二 乘法 可 获得 辅助 模型 的 参数 无 偏 一 致 估计 丰 为 
Bi = (EULBT) -Hitzi (3.100》 
式 中 
已 = [zfl),z(2) zx( 工 )] (3 .101 
再 | = [NETCIL) 82 让 ( 工 ) 


3,10.2 系统 模型 参数 辨识 
系统 模型 参数 辨识 是 多 级 最 小 二 冬 辩 识 的 第 二 级 。 根 据 式 (3.96) ,有 
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4{z )FOz = 昌 (z (ze 1) (3.102》 
定义 
六 = [aiyazyean ybtsb2 {3.103》 
比较 式 (3.102) 两 边 = 疝 基 项 的 系数 , 可 得 
z> 一 下? 人 (3.104) 
式 中 
ee 
0 1 1 0 
- 尹 . 9 放 ! 
7 ”1 
玉 - 7 下 岂 直下 十 下 【3.105)》 
一 六 : en ; 
尹 一 声 站 .…， en 4 


若 上 式 z: 和 再 中 的 元 素 上 和 e; 分 别 用 它们 的 司 计 值 六 和 人 i 代替 , 则 式 
[3.104)? 可 写成 
(天 ) = 站 9 + PH (3.106) 

式 中 ,z: 是 x% 和 正中 的 元 素 用 对 应 的 估计 值 代 替 后 所 引起 的 误差 项 。 视 ma 为 白 
噪 声 , 则 可 利用 最 小 二 乘法 获得 系统 模型 的 参数 估计 值 如 

在 ,= (让 了 育 ?)-1 在 T zs (3.107) 
式 中 , 产 , 和 z， 珍 示 (3.105) 中 的 元 素 均 用 估计 值 代 替 。 
3.10.3 噪声 模型 参数 辨识 


噪声 模型 参数 辨识 是 多 级 最 小 二 丧 办 识 的 第 三 级 。 根 据 式 (3.9%6), 有 
-1 -1 -1 
人 ) = As )C 】 (3 .108) 
F(z 1) = B(zTIC(Cx 
定 六 
从 3 一 [coezeyee (3.109》 
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比较 式 (3.108) 两 边 =“' 同 笑 项 的 系数 , 可 得 
总 3 五 3 (3.110+ 


式 中 


Z3 一 [一 Ge 一 人 


万 -站 
1 … 0 

al - 
1 
oa 41 

0  …  : 

一 | 和 


3.111) 


呈 一 ] 


让 
| | 
本 囊 


若 上 式 zs 和 互 : 中 的 元 素 ai 访 . 卢 和 ge 分 别 用 对 应 的 估计 值 代替 , 则 式 43.109) 
可 写成 


Per 

用 
一 

于 


心 


za(8) 一 下 ;63 二 23 《3.112) 

式 中 , 同 是 xz3 和 瓦 ; 中 的 元 用 对 应 的 估计 值 代 赫 后 所 引起 的 误差 项 。 视 为 昌 
噪声 , 则 可 利用 最 小 二 冬 法 获得 系统 模型 的 参数 估计 值 信 

pb = (HH5) -LUBJ z3 (3.113) 


式 中 , 直 ; 和 z3 表示 式 (3.111) 中 相应 的 元 素 均 用 佑 计 值 代 圭 。 
综 上 分 析 , 式 (3.100).(3.107) 和 (3.113) 组 成 了 多 级 最 小 二 科 法 ,利用 输入 输 
出 数据 ,可 以 分 别 求 得 辅助 模型 .系统 模型 和 唆 声 模型 的 参数 估计 值 。 在 高 信 唆 比 
的 情况 下 , 多 级 最 小 二 攻 法 将 明显 优 于 广义 最 小 二 乘法 ,广义 最 小 一 乘法 可 能 出 现 
多 个 收 敏 点 ,而 多 级 最 小 二 乘法 的 收 全 点 是 惟一 的 。 
例如 ,考虑 仿真 对 象 ， 
zf&)t+0.9z( 上 -1)+0.15zx( 一 2)+0.02z( 上 一 3) 
| 一 0.78( 开 一 1 一 1.Sxz( 开 一 2) +e() 
ef) 十 1.0ef 下 一 1 +0.4le( 开 一 2) 二 AVI 到 ) 
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式 中 ,ze) 和 xz(E) 是 输入 输出 数据 ;of(R) 是 零 均 值 、 方 差 为 1 的 不 相关 的 随机 聊 
声 ;2 (8 ) 采 用 与 et) 不 相关 的 随机 序列 ;控制 4 值 ,使 信 噪 比 了 =92 站 。 模 型 结 
构 选 用 


1 


册 (z xf = 站 (zf 开 ) 十 【 交 ) 


CD 
式 中 
症 {r ID) 一 了 二 QQ 区 十 全 7 交 于 十 如 3 和 
再 (= 二 = 六] 十 而 32 
C(s 一直 +elz 1 二 cag 


当 数 据 长 度 取 工 =4S$0 时 ,利用 多 级 最 小 二 了 法 的 办 识 结 果 如 表 3.5 所 示 。 
此 例 若 用 广 六 最 小 二 乘法 ,在 高 信 虹 比 情况 下 ,将 无 法 获得 参数 的 无 偏 估 计 值 .可 
见 , 当 依 噪 比 相 对 较 大 时 ,多 级 最 小 二 乘法 比 广义 最 小 二 乘法 更 有 使 用 价值 。 

表 3.5 多 级 最 小 二 和 法 辩 识 结果 
大 数 el ae 名 3 1 由 2 E c 


真 人 惨 0.9 站 ,15 人 和 ,02 0.7 -1.5 1 .0 0.41 
估计 恒 站 .89559 站 ,15798 0.01463 0 .696 罗 -1.4970 01149 “0.40463 





3.11 小 结 


最 小 二 乘法 是 1795 年 高 斯 在 他 著名 的 星体 运动 轨道 预报 研究 工作 中 提出 的 。 
此 后 , 它 就 成 了 估计 理论 的 葛 基 石 。 最 小 二 乘法 思想 是 使 各 次 实际 观测 值 和 计算 
值 之 间 差 值 的 平方 乘 以 度量 其 精确 度 的 数值 以 后 的 和 为 最 小 。 由 于 最 小 二 乘法 原 
理 简单 ,编制 程序 也 不 困难 ,所 以 它 籽 受 人 们 重视 ,应 用 相当 广泛 。 

最 小 二 乘法 的 基本 结果 有 两 种 形式 :一 种 是 经 典 的 一 次 完成 算法 ; 另 一 种 是 现 
代 的 递 推算 法 。 最 小 二 乘 一 次 完成 算法 比较 适合 理论 研究 ,但 编制 程序 时 占用 的 
存 铺 空间 较 多 ,计算 量 较 大 ,所 以 多 用 于 离线 系统 辨识 ;最 小 二 乘 递 推算 法 的 基本 
思想 是 新 的 估计 值 等 于 前 一 次 的 估计 值 加 上 修正 项 ,这 样 不 仅 可 以 碱 少 计算 量 和 
存 情 量 ,而 且 能 实现 系统 的 在 线 辨 识 。 

增 广 最 小 二 乘法 扩充 了 最 小 二 乘法 的 参数 向 量 和 数据 向 量 , 把 嗓 声 模型 的 辩 
识 同时 考虑 了 进去 。 增 广 最 小 二 乘法 又 是 一 种 近似 的 极 大 似 然 法 。 

广义 最 小 二 乘法 的 基本 思想 是 基于 对 数据 先进 行 一 次 波 波 琐 处 理 ,然后 利用 
普通 最 小 二 乘法 对 滤波 后 的 数据 进行 辨识 。 广 义 最 小 二 乘法 所 用 的 滤波 模型 实际 
上 是 一 种 动态 模型 ,在 整个 选 代 过 程 中 化 全 差 信息 来 不 断 地 调整 滤波 模型 ,使 之 逐 
斯 遥 近 手 一 个 较 好 的 滤波 模型 ,以便 对 数据 进行 较 好 的 白色 化 处 理 ,使 模型 参数 佑 
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计 成 为 无 偏 一 致 估计 。 

密级 最 小 二 飞 法 是 利用 输 人 输出 数据 ,分 别 求 出 辅助 模型 .系统 模型 和 噪声 模 
型 的 参数 估计 值 。 在 高 信 噪 比 的 情况 下 , 多 级 最 小 二 屁 法 将 明显 优 于 广义 最 小 二 
乘法 ,因为 多 级 最 小 二 和 蒋 法 的 收 敏 点 是 惟一 的 。 

本 章 的 相应 部 分 .分别 给 出 了 2 个 最 小 二 乘 一 次 完成 算法 的 MATLAB 6.0 仿 
真实 例 、1 个 最 小 二 科 递 推算 法 的 MATLAB 6.0 仿真 实例 和 工 个 增 广 最 小 二 乘 准 
识 的 MATLAB 6.0 仿真 实例 。 

多 变量 线性 系统 的 辩 识 参看 文献 [42] 的 第 15 章 及 文献 [45] 的 第 6 章 。 


本 『 
习 


1. 什 乞 是 最 小 二 篆 参 数 辩 识 问题 , 简 述 其 基本 原理 。 
2. 简 述 在 最 小 二 和 匀 参 数 估 计 问 题 中 引 和 人 加 权 因 子 的 作用 。 
3. 1946 一 1956 年 美国 的 钢 年 产量 如 表 2. 红 单位 为 百 万 吨 ) 


胡 2.54 


年 1946 1947 1l98 1949 195 和 195t 1952 1953 ”1954 1953 ”19956 








产量 6 休 6 到 9 昭 1 有 0 着 8 1052 92 116 .3 117.0 115.2 





若 钢 年 产量 用 如 下 两 种 模型 描述 :中 *= 加 + 自 夺 加 5= 妈 二 克 上 + 丰产。 式 中 , 
表示 钢 年 产量 ;* 表示 年 代 。 试 用 最 小 二 箭 的 一 次 完成 算法 确定 这 两 种 模型 的 
参数 加、 记 、02。 
4. 考虑 图 3.6 所 示 的 仿真 对 象 , 其 中 ,of(8) 是 服从 .M0,1) 分 布 的 不 相关 随机 咖 
声 。 且 v 
Gl(z 0 = B(z DAA(z NOz) = DOz CCz  ) 
由 (xz-1) 一 1 一 2.Salz-l+ 1.7x 一 一 站 (1) 
ee 一 1.6z-L 十 0.8z 
Drfz-D) = 1 
车 仿 真 对 象 选择 如 下 的 模型 结构 
zf 天 ) 二 alzf 开 一 1)》+Gaz( 开 一 2) = 起 (下 一 二 十 区 EC 一 2 十 只 二 
试用 递 推 最 小 二 乘 算法 确定 模型 参数 al aa sl.5z。 
5, 设 某 物 理 量 y 与 zl .zz 和 z3 锻 足 关系 :y= 人 TI+ 的 rzt+ 有 oraso 实验 获得 一 
批 数据 如 表 2.7, 试 用 最 小 二 科 法 确定 模型 参数 .6 入 。 
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第 4 章 梯度 校正 参数 办 识 


梯度 校正 参数 辩 识 方法 的 基本 思想 是 沿 着 准则 天 数 的 负 梯 度 方 癌 ,逐渐 修正 
模型 参数 的 估计 值 ,直至 准则 西数 达到 最 小 值 。 从 第 3 章 的 最 小 二 乘 参数 辨识 中 
可 知 , 递 推算 法 的 结构 为 :新 的 参数 佑 计 值 等 于 老 的 参数 估计 什 加 上 增益 夭 阵 与 新 
息 的 乘积 。 梯 度 校正 参数 辨识 方法 具有 相同 的 结构 ,但 其 基本 原理 却 完 全 不 同 于 
最 小 二 乘 参数 辨识 。 本 章 将 着 重 研究 四 个 问题 :确定 性 问题 的 梯度 校正 参数 辨识 ， 
它 是 研究 随机 性 问题 的 基础 ;随机 性 问题 的 梯度 校正 参数 辩 识 :梯度 校 正法 在 动态 
系统 辨识 中 的 应 用 ;随机 通 近 法 。 


4.1 确定 性 问题 的 梯度 校正 参数 辩 识 方法 
4.1.1 确定 性 梯度 校正 辨识 公式 的 推导 


设 系统 的 输出 y( 纪 是 参数 由 ,2 … ,ov 的 线性 组 合 
3ft) = Pit)9T RE)Oa 十 十 0Bv 《4. 了 1) 
如 果 和 输出 y( 廿 和 输入 jaitz) az，…RN(t) 是 可 以 准确 测量 的 , 则 系统 (4.1 称 
作 确 定性 系统 ,如 狗 4.1 所 示 。 


一 本 


图 4.1 确定 性 系统 
置 
1 = [有 1 瑟 2(t)，RNCE)] 
[4.2) 
8 = [人 2, 5 鸭 ]7 
苦 系 统 参数 的 真 值 记 作 如 , 则 有 
yt = 下 元 划 80 (4.3) 
在 离散 点 又 可 以 写成 
3(R) = 起 区 上 ) 8 (4.4) 
式 中 
产 (二 ) 一 【下 1( 开 ) 用 2 下) RN 二 【4 .】 


例如 ,用 差分 方程 描述 的 确定 性 系统 
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十 人 3 下 一 贡 十 十 Ca 下 一 有 天) 一 再 下 [下 一] 十 十 可 和 (下 一 天 ) 


(和 .6) 

很 容易 化 为 式 (4.4) 的 形式 ,其 中 
1 一 [一 外 一 1 一 44 7 
笑 二 [ai ya2， 2 加 ) 


现在 的 问题 就 是 如 何 利用 输入 输出 数据 有 产 (和 y(E) 来 确定 参数 8 在 上 时刻 的 估 
计 值 8(&) ,使 准则 函数 


几 昌 ) = 二 8 人 和, 开 ) = mim 《4 .8 


工 
站 (te) 2 [本 


式 中 
E( 人 ) 一 了 ()》 一 下 ( 友 ) 从 [4.9) 
梯度 校正 法 , 即 最 速 下 降 法 ,可 以 解决 上 述 问题 。 具 体 做 法 就 是 沿 着 J(68) 的 负 梯 


度 方向 不 断 修 正 B(t) 值 ,直至 J(6) 达 到 最 小 梯度 校正 法 的 数学 表达 式 为 

6(e+1) = 站 (类 ) 一 尽 (t) grad[J(B)]| 8 (4.10) 
式 中 , 民 (R) 是 N 维 对 称 和 矩阵 , 称 作 加 权 阵 :grad[J(b)] 表 示 准 则 函数 J(6) 关 于 8 
的 梯度 。 当 淮 则 函数 J(6) 取 式 (4.8) 时 ,有 


ttolra - 昌 Laceo 





舍 () 
王 一 让 (和 @( 天 ), 直 ) 丰 (大 ) 一 一 [一 站 元 天) 站 (天 ) 二 (大 ) 
， 【4.41) 
则 式 人 4.40)? 可 写成 
在 ( 才 + 1) = 前 (有 )》 十 县 (天 ) 天 (天 )[Y( 开 ) 一 天 划 天) 而 ( 友 )] (4.12) 
此 式 就 是 确定 性 问题 的 梯度 校正 参数 估计 递 推 公式 ,其 权 挎 阵 丽 人) 的 选择 是 非 
常 关 链 的 ， 


4.1.2 权 上 矩阵 的 选择 


权 息 阵 及 人 () 的 作用 是 用 来 控制 各 输 人 分 量 对 参数 估计 值 的 影响 在 度 。 由 式 
【4.12) 知 ,输入 数据 向 量 产 () 的 各 分 量 疡 (天 ) 将 直接 影响 参数 估计 值 。 设 权 矩 阵 
民 ( 直 ) 具 有 如 下 形式 

灵 {R) 二 CE)diag[ 和 下) 和 (RN( 开 | (4,.13) 
只 要 选择 4;(E) ,就 能 控制 各 输 人 分 量 有 (&) 对 参数 估计 的 影响 。 便 如 ,如 果 选 择 
RD) 二 1 2 {4.14) 
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意味 着 输 和 分量 六 ;1(&) 对 参数 估计 值 的 影响 较 天,(R) 绊 。 呈 然 , 这 种 情况 Ar ) 
对 参数 估计 俯 的 影响 最 小 。 如 果 选 择 

diag| 41(R) ,4A2(R)。， AN 站)] 一 了 (4,15) 
意味 着 输 人 分 量 的 加 权 值 相同 ,它们 对 参数 估计 值 的 影响 是 一 样 的 。 至 于 如 和 何 合 
理 地 选择 加 权 值 4i (下 ) ,这 需要 视 具体 问题 而 定 。 权 和 矩阵 及 () 中 的 标量 ct ) 由 


定理 4.1 给 出 。 
定理 4.1 确定 性 问题 的 梯度 校正 参数 估计 递 推 公式 为 
和 (ER +T1) = 站 (R) + 现 ( 开 ) 下 (RE)EfR) [4.16a) 
式 中 
EL 下 ) = 3 下 )》 一 下 区 开 ) 看 ( 虹 】 {4.16b) 
且 示 抢 阵 丸 (R)? 选 如 下 形式 
愉 () 一 (二 )diag[ ARE) 42(R) AN(E) |] (4.17) 
如 果 权 年 阵 及 (AI) 的 元 素 满 足下 列 条 件 


(1 0 AAA Ar 和 4 为 确定 的 上 、 下界 值 ; 
(2 N 个 4 ) 中 至 少 存在 一 个 4 (R) ,使 得 
Ai(KEJ 一 AR+1) AR) 一 有 (天 二 1) 
疙 (下 二 屿 六 开 ) (4.18) 
dr(E+1) AI(E+1) 
人 as() 


(3)0< rcD< 一 一 
二 Ai()R3() 

(4) 8 与 下 (天 ) 不 相交 ,其 中 四 R)= 加 一 让 (E) ,那么 不 管 参数 佑 计 的 初始 

值 如 和 何 选 择 ,参数 估计 值 和 人) 总 是 大 范围 一 致 渐 近 收 委 的 , 即 有 
lim 在 () = 罗 0 (4.20) 

定理 4.1 的 条 件 (1) 规 定 加 权 值 4;(&) 必 须 是 大 于 零 且 有 界 的 实数 ;条 件 (2) 
是 推导 条 件 (3) 的 前 提 ; 条 件 (3) 是 保证 友 人) 大 范围 一 致 渐进 收敛 的 条 件 。 定 理 
4.t 的 证 明 思 路 婚 下 ， 


根据 式 (4.16) 及 参数 估计 偏差 bf(&) 的 定义 ,可 得 
人 ( 开 +1)= [了 -下 ( 开 ) 丰 (到 ) 丰 TI( 开 让 在 ( 天 ] 《4,21) 


显然 ,该 式 是 06(&) 的 离散 时 间 运 动 方程 。 
设 标 量 浮 数 


《二 .19) 
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的 (二 ) 
人 (到 ) 


式 中 , 遇 必 )= 和 站 全) 有 是 真实 参数 向 量 如 的 第 庆 个 元 素 ; 且 4 () 满 足 条 
件 (2)。 可 以 证 明 [BC 大] 是 方程 (4.21) 的 Lyapunov 函数 。 应 用 Lyapunov 主 
称 定 性 定理 可 以 证 明 , 当 条 件 (2) 和 {3) 成 立时 ,方程 (4.21) 在 平衡 状态 8 = 
点 上 是 大 范围 一 致 渐进 稳定 的 。 

Lyapunosy 主 稳定 性 槛 求 : 

(1 YI 人 ED) 光 ]>0, 对 所 有 的 8( 开 ) 天 0 

(2) V[B(R) 一 03 有 全 ( 开 ) 一 人 

《3) 当 | 8( 二 川 ~co 时 ,有 有 [8 二 ) 天] coi 

(4) AVI[D,E <0, 对 所 有 的 有 (天 0, 式 中 

ATY[ 站 下 = [EGR 二 1 天 +1 一 YIG(R) ,大 ] (4.23) 

由 式 (4.18) 和 (4.22) 知 ,(1) (2 和 (3) 一 定 满足 ,下 面 证 明 (4)。 


令 


[BE = 3 (4.22) 


VB6(R +TT 十 1 TV[G( 二 到 ] 


AD (4 24) 


AAAV [人 = 


根据 式 (4.22) ,可 得 


人 2 -的 电 ， 一 矶 ， 








世 Ai 有) ACE) TT) 
= 奶 + 疡 2 全 (4.25) 
式 中 _ 
a- 立 0 天 人 
= 了 [BCk+D) - 床 ( 二 )][ 训 (+1) + 证 (E) 一 2 有 04.26) 


利用 式 人 4.16), 上 式 可 化 成 
是 
入 = c( 肛 )e (有 ) 2 太 (县 [下 》 生 二) 二)e( 玫 ) 一 26(R)] 


= -Bez( 有 [ce) SN 丰 民 开 ) 丰 红 下 )] 一 卫 ] (4.27) 
= 


同 理 , 根 据 定理 4.1 所 给 的 条 件 (2) 及 式 (4.22), 式 (4,.25) 可 进一步 写成 
站 (一 站 [天 十 六 全 人 上 1 
生 让 (两 ) 1= 工 攻 六 下 十 上 








ATVat6k)< 委 久 + 


- 岂 、 系 录 办 议 及 其 MIATLAS 仿真 








人 (二 ) 一 生起 十 上 











= 届 + TEST VD(RT+T1) +1] 
V[B(RTT》 +T1] YIB(+1) 上 二 1] 
QT+ AAA (上 ) 4 人 有) 1 
注意 到 AVY [8,8] 和 和 AVI, 天 ] 的 定 尽 可 得 
AV[8] 扫 QQA (RE) 【4.29】 
由 于 上 (0 所 以 为 了 使 AY[B <D 必须 和 <0,， 即 要 求 
cs2(A)[e(ey ACER) -2]<0 (4.30) 


由 定理 4.1 所 给 的 条 件 (4) 扼 ,8(R) 与 在 (到 不 正定 , 故 (= 用 (下 ) 丰 (大 ) 关 0。 
因此 不 等 式 (4.30) 的 解 为 
0 芯 c 人 < 一 一 (4 .31) 
Ai(E)A3() 
综 上 所 述 , 只 要 定理 4.1 的 条 件 得 到 满足 , 必 有 AVI[8.8j<n0, 于 是 应 用 Lyapunov 
主 稳定 性 定理 可 以 判断 8() 是 洒 进 一 致 收 误 的 。 也 就 是 说 ,如 果 有 (下 ) 与 正 ( 大 ) 
不 正定 , 权 惩 阵 有 ( 有 ) 选 用 


宛 


2 ACERSA) (4.32) 
性 刀 必 扫 之 
则 方程 (4.21) 在 80&)=0 点 上 是 大 范围 一 致 请 进 稳定 的 , 即 有 
ji 让 (= 的 [ 半 .33) 


例如 ,1，Nagumo 和 ANoda 在 一 个 实验 研究 中 各 选 择 4 = 工人 三 1 2， 
N)， 即 取 
< 
尺 ( 二 ) 一 [人 (4.341) 

实验 证 实 参 数 估计 值 加 0) 能 较 好 的 收 伍 于 真 值 0。 

如 果 6(E) 与 是 (有 ) 正 交 或 时 间 至 大于 某 值 后 ,出 现 9() 与 严 (R) 正 交 , 则 方 
程 (4.21) 不 再 是 大 范围 一 致 渐进 稳定 。 也 就 是 说 , 当 & 上 一 co 时 ,8( 丰 不 会 趋 于 零 ， 
而 且 18(8)|< 委 ss 是 大 于 零 的 实数 。 如 果 输 人 量 有 (有 ) 每 个 分 盟 所 含 的 独立 频率 
和 分量 不 少 于 (UN+ 1) 忆 种 , 则 方程 (4.21) 还 是 大 范围 一 致 浙 进 稿 定 。 可 见 ,在 实际 
应 用 中 ,定理 4.1 的 条 件 (4) 必 须 给 与 充分 注意 。 

定理 4.1 的 条 件 (3) 还 告诉 我 们 , 权 和 矩 阵 民 人 } 中 的 标量 c(&) 存 在 一 个 选择 
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攻 转 。 那 么 在 这 个 范围 内 是 和 否 存 在 一 个 最 佳 值 ? Lyapunov 稳定 性 定理 指出 ,如果 
AV[B,&] 值 越 负 ,8(5) 收 委 于 b 的 速度 越 快 。 如 果 存 在 一 个 <” (R) ,使 得 
IEAV[6,8]1= max, 则 这 个 ec () 就 是 所 要 找 的 最 佳 选择 值 。 根 据 式 (4.29) ,为 
了 使 |AV[8, 关 ]| =maxyc” (RE ) 值 必须 使 | QI =max。 为 丝 , 由 

















3aQ 
元 | ， = (4.35) 
可 得 
2c7(Ae2( 有 LHC -2 有 = (4.36) 
由 于 8(R) 与 放 (R) 不 正 变 ,所 以 拓 () 天 0; 且 不 难 验 证 
寻 站 
ac (下 ) | tb 1 
故 得 c(&) 的 最 佳 选 择 值 为 
c( 有 = 一 一 (4.38) 
2 Ai(R)R3) 
财 最 佳 权 和 矩阵 可 写成 
玉 “(k) = -一 aiag[Ai(t)，Az(A)， NE)] (4.39) 


> Ai;( 天 ) 天 2( 二 ) 


R (有 通常 称 作 Lyapunoy 最 佳 权 矩阵 。 如 果 式 (4.16) 算 法 中 的 权 矩 阵 选用 
民 :() 则 参数 估计 和 值 将 以 最 快 的 速度 收 化 于 真 值 和 。 


4.2 脉冲 响应 梯度 校正 辨识 的 MATLAB 仿真 
考虑 图 4.2 表示 的 线性 时 不 变 SISO 系统 。 根 据 眷 积 定理 ,系统 的 输出 y(&) 
与 输 人 序列 ae 一 1)ze( 开 一 2)， 2 人 (一 入 ) 的 关系 可 表示 成 


3 人) 二 gu 人 (有 站 (4.40》 


起 中, ,e.g 组 成 系统 的 脉冲 响应 。 系 统 在 伪 随机 码 输 入 作用 下 的 输出 响 
庶 如 赛 4.1 所 示 。 


加 1 


图 4.2 单 输 人 单 输出 系统 


.06 - 系 钝 孝 识 到 其 RMIATLAB 仿真 


胡 4.1 输入 输出 数据 


RD Ta2 33460778 3939btl2 0 地 1 了 1 186 19 … 


at -1 -1-1-1 上 1 1- 1 1-1-1 1-1 1-1-1-1-1 1 … 





328 站-2 -6-7-7-3 和 7 3-1 和 3-5-3 1-1 1 -3 -7 了 了 -37 了 


利用 这 些 数据 辨识 系统 的 脉冲 响应 , 当 六 取 3 时 ,有 


3 
3(E) = 2 Sa( 二 一 (4.41) 


必 


人 = [ef 是 一 1,af 开 一 2)，af 下 一 3 
【4.421) 


有 二 [gsga,g3] 
若 系统 的 真实 读 冲 响应 记 作 加， 则 有 
(下 ) 三 大 以太)B0 (4 .431) 


根据 式 (4.16) ,脉冲 响应 估计 值 有 (下 ) 的 递 推 算式 为 
让 (下 十 寺 )》 = 不 (下 )》 十 要 ( 天 ) 正 (天 )[ (并 ) 一 天 T( 雪 ) 让 (到 )] (4.44) 
式 中 ,脉冲 响应 估计 值 的 初始 值 取 8 =0, 权 矩阵 民 () 取 如 下 形式 


Ri (= 一 -一 上 aiag[ALE) 4320) 43(E) (4.45a) 


2， 矶 ;下 ) 矶 2 下 ] 


Ab) = T， AR - 过 ， A3( 有 ) = 卫 (4.45b) 
确定 人 性 问题 梯度 校正 递 推算 法 轩 识 的 流程 如 图 4.3 所 示 。 下 面 给 出 MAT- 
LARBS6.0 程序 
所 梯度 校正 大 数 辨 识 各 序 , 在 光盘 中 的 文件 名 :FLeh4GAegl.m 
lear 








us 一 1 一 1 一 1 一 1 一 1 和 1 一 1 一 二 1 一 tl, 一 1 一 1 一 ,一 1 , 吉 ; 
ys= [人 一 2 一 6 一 了， 一 了, 一 35.7,3， 一 1,5.3. 一 5, 一 3,1, 一 1,1, 一 ,一 7 了, 一 7]; 
上 画 出 u 和 图 形 

fenmredI1L) ，subplotf2 ,1 .17，stemgu] ，subhplot[2 .1 ,2)，sternfty)，hold on 
k=1l:205plotfk ,7 

驶 给 出 初始 值 

hlL=[ -100]5 但 =[ 一 19] =[00,0]5 IT=T0001,0500,14]; 
hh= [hl1 ,hz2，zetosf3,16)]; 





- 一 ”= 一 一 一 一 -一 一 -一 


计算 模型 输出 值 凡 下 系统 答 则 与 模型 输出 之 间 的 误差 鼎 


显示 脉冲 响应 估计 值 、 模 型 答 出 值 、 系 纺 输 山 与 榄 型 输出 之 间 的 误 姜 


画 出 被 乓 识 参 数 四 的 得 这 估计 萌 
本 出 系统 输出 与 模型 输出 之 冯 的 误 状 













订 4.3 确定 性 梯度 校正 辨识 的 MATLAB 6.0 程序 流程 图 


% 寺 算 样 本 数据 以 名 
tor 攻 一 人 :8 
hky=Eufk)su 人 一 1)，u(k 一 20]1 
em 可 
名 计算 权 乞 阵 RIk) 和 吕 的 估计 炉 
for 攻 一 二: 1 有 
=RCLEr2+tbhf2,kT2? +(h(3k) 2 al= lai 及 =al*[i % 和 按照 式 (4.45a) 和 (4.45b) 计 算 
驳 权 矩阵 
全 :KE+1)= 区 CE)+RAht:kysetk+l)-hi:titgfik)) 名 按 腿 式 (4.44] 计 算 脉 冲 啊 应 的 
% 个 计 慎 
end 
交 伏 图 
&L= 区 1: 开 = 可 2 本 一 下 3 
figuaref2]; 人 = Tt subplot(121); Rlotf KgE TB2 ,全 四 b) id on 
% 计 算 模 型 输出 rm 及 系统 输出 与 模型 输出 之 间 的 误 羞 Ey 
for 天 = 二 :1 


， 昭 ， 系统 办 识 及 其 MIATLAB 仿真 





WP 一 Rn 
end 
长 = 人， subplotfl2235 plotfk,Ey)，gmid on 
E. ym， EYy 名 显示 脉冲 响 记 估计 值 . 模 型 给 出 及 系统 输出 与 模型 输出 之 间 的 误 营 
fguret 3 xx 一 有 :1:3; 7 二 [0 EL,18)7 (218 53 18)] ;和 = inspasek0,333 列 -= inteIplkx ,ysdi cubic 1 
plotf(xyyy op' xj:yiyry，Brid on 负面 出 脉冲 响应 帖 计 情 及 其 三 次 桂 值 曲线 
程序 执行 结果 : 
g= 
0 20000 4.6667 5.2381 .2381 1.53794 .1438 了 2.23903 工 0638 1 工 .9559 
0 人 13333 革 .6190 区 3.4684 3.TT206 204 3.% 人 3.9621 
心 夏 0 0.1420 日 .1420 1.0680 0D,9164 0.9403 下 .0087 1.0062 


2.0063 1.9918 1 90 各 上 多 1.9985 1.99985 1. 的 895 2.0001 2. 的 3 
3.98793 3.99 折 3. 归 了 7 30990 3.9969 3 了.9969 39969 3.9072 3. 的 崩 
0.99 药 0. 反 P2 0.90 和 9709963 0. 名 到 和 遇 . 有 74 有 ,的 74 有 ,09 有 ,多 吕 


yim= 
[0 -2.0000, -50000, 一 7.0000 .3.4762 ,3.9388 ,5.8328 ,2.5213，- D.9826,4.91]8,2.9746， 

对 一 ,9891, 一 2.9953，1.0073,， 一 1.0000.1.0000, -4.9990 ,一 6.9945] 

PEy 一 

[1 -2.0000, -4.0000, - 1.0000.0.0000，- 日 .4762，1.0612,.0.16072.0.4787,， 一 0.0174.0.0882 0. 忆 254， 
,0109 ,一 癌 -0047 ,一 0 和.0073, 一 0.0000,0, ~0.0010, -0.0055] 

图 4.4 表 明 , 递 推 到 第 10 步 时 ,被 辩 识 参数 基本 上 达到 了 稳定 状态 , 即 上 一 2， 
一 4，g3 一 1; 此 时 系统 的 输出 与 模型 的 输出 泛 差 也 基本 达到 稳定 状态 , 即 丈 , 一 
0。 由 于 被 罪 识 参 数 的 个 数 较 少 , 递 推 校正 算法 的 收 伍 性 比较 好 ,也 就 是 说 ,输入 输 
出 的 观测 数据 量 已 足 驶 。 但 从 图 4.4 Figure 3 中 可 看 出 ,由 于 被 辨识 参数 的 个 数 
较 少 , 它 还 不 足以 充分 显示 全 部 的 系统 脉冲 响应 。 

为 了 充分 显示 出 系统 的 脉冲 响应 , 苛 以 把 被 辨识 参数 的 个 数 增加 到 5 个。 图 
4.5 给 出 了 被 辨识 参数 的 个 数 为 5 时 的 因 识 结果 。 图 4.5 基本 显示 出 了 系统 的 全 
部 脉冲 响应 过 程 。 但 在 图 4.5 的 辩 识 中 ,还 是 利用 上 面 给 出 的 20 对 输 人 输出 数 
据 。 通 过 图 4.4 与 图 4.5 的 比较 可 以 看 出 ,在 观测 数据 量 一 定 的 情况 下 , 随 着 被 辩 
识 参 数 的 个 数 的 增加 ,梯度 校正 辩 识 算法 的 收敛 人 性 变 差 ,这 是 由 于 观测 数据 不 足 ， 
递 推 步 数 有 限 造成 的 。 所 以 , 随 着 被 辨 识 参数 的 个 数 的 增加 , 若 要 保持 梯度 术 正 办 
识 算法 的 收敛 效果 ,需要 同步 增加 观 油 数据 量 . 
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图 4.4 确定 性 问题 梯 庶 校正 参数 辨识 仿真 (被 辨识 参数 的 个 数 为 3) 
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图 4.5 确定 性 问题 梯度 校正 参数 准 识 仿真 (被 固 识 参数 的 个 数 为 旨 
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4.3 随机 性 问题 的 梯度 校正 参数 辨识 方法 
4,3.1 随机 性 问题 的 提 法 


确定 性 问题 的 梯度 校正 辨识 方法 与 其 他 办 识 方法 相 比 ,最 大 的 优点 是 计算 简 
单 。 但 是 ,如 果 系 统 的 输 和 人 输出 含有 咯 声 ,这 种 方法 就 不 好 用 了 ,为 此 必须 研究 随 
机 性 问题 的 梯度 校正 法 。 狂 机 性 问题 的 梯度 校正 法 的 特点 也 是 计算 简单 ,可 用 于 
系统 在 线 实 时 辨识 。 恒 是 , 它 要 求 事先 必须 知道 品 声 的 一 阶 矩 和 二 阶 逢 的 统计 特 
性 ,这 是 这 种 方法 的 缺陷 。 





图 4.6 随机 性 系统 
如 图 4.6 所 示 , 设 系统 的 输出 y(&) 是 模型 参数 记 , 见 ，…, 隶 的 线性 组 全 
下) 一 下 区 开 ) 有 1 十 下 2 下) 人 2 十 十 下 NB 《和 461 


输 人 输出 数据 均 含 有 测量 噪声 , 即 





呈 ) 一 3 十 of 开 ) 
全 人 i = 1 2 (7 
式 中 ,zw(t) 和 si( 有 为 零 均 值 的 不 相关 随机 噪声 , 且 
2 ，_- 
Bla(D5CD1= 1， (4.48) 
0， 工 天 j 
置 
和 ( 开 ) 二 [1() 2 下) NMN( 天 7 
天 (二 ) 二 [大 人 [二 ) 下 二] 下 WC 下 )] 工 
《 归 ) 一 [天 克 二) 五 直 二] MK 1 <4 区 
8) 一 [SC) 52( 二 ) SC 7 
目 = 1931 ,02 ， 0 
则 
区 《 克 ) 一 让 (二 ) 十 8 下 
4.S0 
习 一 上 攻 下 ) 相 十 of] ) 


现在 的 问题 就 是 利用 输入 输出 数据 x(&) 和 zx( 二 ) 来 确定 参数 6 在 坟 时 刻 的 佑 计 值 


1]U2 系统 辨识 下 其 MIATLAB 人 坊 焉 





8(t&) ,使 准则 明 数 
人) 计 (8》 = 于 2(9, 人 此 = min {4 .51) 


式 中 
E( 和 大) = zf) 一 半 IE) 胡 【.S21 


下 面 将 讨论 这 个 问题 的 参数 辨识 方法 。 
4.3.2 随机 性 辨 识 问题 的 分 类 
随机 人 性 辨识 问题 一 般 分 为 三 类 。 
1. 第 一 类 戎 机 性 办 识 问 题 
4.7 所 示 的 随机 性 系统 因 识 ,如 果 满 足下 述 条 件 , 则 称 为 第 一 类 随机 性 辨识 





图 4.7 第 一 类 丁 机 性 辨识 问题 


(I) 输入 向 量 站 (二 ) 与 零 均 值 的 测量 陈 声 z() 是 独立 统计 , 即 有 
互 | 请 (RE 一 个 【4,.53) 


式 中 , 忆 {) 的 方差 不 必 先 知 。 
(2) 输 人 向 量 产 ( 开 ) 的 条 件 协 方 差 阵 是 常数 阵 , 旦 与 () 无 关 , 即 
五 下 (天 下 区 二] | 站 (RE 一 玫 (天 TCR = 本 (4.54) 


式 中 ,和 肌 是 正定 的 常数 阵 ,但 不 必 先 知 。 
(3) 输入 向量 的 测量 噪声 *{& 是 均值 为 零 , 协 方差 阵 为 到 的 不 根 关 离散 随 


机 向 量 , 且 与 上) 和 冯 () 都 是 统计 独立 的 , 即 
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忆 1 下 
下 8 有 8 一 diagfcy ,os ， ai| 一 王 
五 sf) = 
LRC = 从 
臣 中 , 可 要 求 先 知 。 


2. 第 二 类 陵 志 性 辩 识 问题 


如 图 4.8 所 示 随 机 性 系统 辨识 ,如果 满足 下 述 条 件 , 则 称 为 第 二 类 随机 性 辨识 
问题 。 
(1) 噪声 ww ) 可 分 解 成 测量 虽 声 记 (RD 和 抗 动 噪声 mdf , 即 
Te 二 Tom[( 开 ) 十 加 凡 开 ] 【4.56) 
式 中 ,rd ) 通 过 “动态 环节 "与 输 估 向量 有 (RE 相关。 已 知 惠 人 7 的 均值 为 党 ,但 
其 方差 不 必 先 知 。 
《2) 输 人 向 量 5) 的 条 件 协 方差 阵 是 常数 阵 , 且 与 新 ( 天 ) 无 关 , 即 


瑟 | 下 (JRTIT(R | 站 (二 )| = 区 | 天 (二 JPT(E) = 用 (4.57) 


(4.55) 













有 
辨识 莽 法 
图 4.8 第 二 类 随机 性 辨识 问题 


式 中 ,如 是 正定 常数 阵 . 它 也 不 必 先 知 。 
《3) 输 人 向量 的 测量 曲 声 *() 是 均值 为 零 , 协 方 莽 阵 为 五 的 不 相关 高 散 随 
机 应 量 , 且 与 ze 和 加 (R) 都 是 统计 独立 的 , 即 





Z 估 ) 
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情 1 = 个 
卫 18( 有 JsT(R)| = diaglo2 ,oo | 一 瑟 
由 册 (4.58) 
j8( 开 Jo) 二 用 
三 tsTfE) = 
式 中 , 马 要 先知 。 
第 二 类 随 机 辩 识 问题 与 第 一 类 问题 的 差别 仅 在 于 站 付 ) 与 吧 ( 伏 ) 是 否 相 关 。 
例如 ,下 面 的 差分 方程 


下) 二 GE13 下 一 二 十 十 Go 人 下 一 下 一 旧 ( 上 一 让 {4 .59) 
式 中 ,人 8) 为 零 均值 的 过 程 噪声 ,输出 y(&) 含 有 测量 噪声 凤 ( 开 ) , 即 
2 下 () 二 sf 站] (4.60) 
置 
天 ( 开 ) 一 [一 (和 一 1)， 一 (下 一 天) 
| = [etez，…yen] (4.61) 
ee[) 一 名 [二 ) 二 TI(] 
则 


2( 开 ) 二 天 芳 二 ) 各 十 ef 于] 《4.62) 
参数 9 的 辨识 问题 是 一 种 典型 的 随机 性 办 误 问 题 。 当 式 (4.59) 中 j<2 时 , 它 属 
于 第 一 类 辨识 问题 ; 当 js22 时 , 它 就 变 成 第 二 类 随机 性 辨识 问题 。 

3. 第 三 次 随 礼 性 内 识 问题 ， 

第 三 类 随机 性 辩 识 问题 不 仅 输 人 向 量 产 () 与 躁 声 世人 () 相 关 , 而 且 下 (8 与 
(2) 也 相关 ,如 图 4.9 所 示 。 这 类 辩 识 问题 难度 较 大 ,本 节 主 要 讨论 第 一 .二 类 办 
识 问题 。 

4.3,3 随机 性 问题 的 梯度 校正 参数 估计 方法 

随机 性 疝 题 梯度 校正 法 的 基本 思想 与 确定 性 问题 一 样 , 也 是 利用 最 速 下 降 原 
理 , 从 给 定 的 初始 值 记 (0) 出 发 , 沿 着 准则 函数 /58) 的 负 梯 度 方 向 禾 正 估计 值 
和 (六 ) ,直至 准则 男 数 J8) 达 到 最 小 值 ,其 数学 表达 式 

半 (E + DID) = 站 (RE) 一 民 () grad[J8)] 1e0 《4.63) 
式 中 , 步 长 间 遇 “的 选择 必须 使 第 一 .二 类 随机 性 因 识 问题 的 条 件 (2) 得 到 满足 ; 
玉 (R) 是 和 维 的 对 称 和 矩阵 , 称 作 权 和 矩阵 ;grad[J9) ] 表 示 准 则 画 数 凡 8) 关 于 尹 的 
梯度 。 当 准则 函数 凡 8) 取 式 (4,51) 时 ,和 确定 性 问题 一 样 ,有 
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图 4.9 第 三 类 随机 性 办 识 问题 


Srad[J(8)] 18ct) = 一 [z( 上 ) 一 二 《不 ) 全 (下 )] 苹 ( 友 ) (4.64) 
则 式 (4.63? 可 写成 
让 (R +) = 看 (有 ) 十 届 ( 开 ) 区 (天 )[z( 天 ) 一 xT(E) 存 ( 开 )] 《4.63) 
此 式 是 随机 性 问题 的 梯度 校正 法 的 基本 公式 , 它 和 式 (4.57) 确 定性 问题 的 梯度 校 
正法 公式 类 似 。 值 得 注意 的 是 ,(4.65) 式 只 能 给 出 参数 渐进 有 仿 估 计 值 , 即 
Tim 五 | 人 ( 友 ) 和 关 的 (4.66) 
这 一 事实 写成 定理 4.2。 
定理 4.2 ”对 第 二 类 随机 性 辩 识 问题 来 说 ,利用 式 (4.65) 获 得 的 参数 估计 值 
是 渐进 有 偏 的 , 即 
Ti 五 { 登 ( 帮 | = (8 + 五 )-1(T2 + 9) 和 本 (4.67)》 
式 中 ,6 表示 过 程 的 真实 参数 , 且 
了 > 一刀 | 关 (天 )ze( 开 7 
Hz = 五 18()5E() 《4.68) 
友 一 下 (下 ) 丰 区 二)| 
证 明 从 略 。 
根据 定理 4.2, 显 然 可 以 得 到 如 下 的 推论 : 
推论 4.1 “对 第 一 类 随机 性 辨识 问题 , 当 输 和 向 量 不 含 测 量 噪 声 时 , 式 (4.65) 
可 给 出 渐进 无 偏 估计 值 , 即 有 
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limE18CA)E = bo (4.69a) 
且 
limE18(R + 人 = im 王 1 和 CA)| + 玉 作 )000 一 及 (LimEi8(R)j 一 go 
(4.699) 


这 时 ,参数 估计 值 就 变 成 渐进 无 偏 的 了 ,基于 这 种 思想 ,可 以 给 出 随机 性 辨识 问题 
的 儿 进 无 偏 估计 算法 。 


1. 第 一 类 随机 性 办 识 问 题 的 襟 度 校正 渐进 无 偏 伟 计 算法 


对 第 一 类 随机 人 性 办 识 同 题 来 说 ,利用 式 {4.65) 所 获得 的 参数 估计 值 和 第 二 类 
问题 -一样 也 是 渐进 有 搞 的 。 但 根据 第 一 类 问题 的 条 件 ,有 Ta =0, 故 式 (4.67) 简 化 
为 

jim 王 | 有) =《〈 和 + 五 ) 990 (4.70) 
且 
五 | 疹 ( 有 二 1 二 王 | 站 (R) 上 + 要 ()200 一 玉 人 二) 二 五 ) 瑟 | 看 ( 雪 )| 
《二 .71》 
若 在 式 1{4.65) 右 边 增加 一 项 及 (R) 马帮 ()， 则 式 (4.71) 进 一 步 变 成 
本 人 (二 站 | 一 五 16(R) 计 二 (二 人 [Bo 一 王 | 站 (天 ) (4.72) 
这 时 6 和 (二 ) 将 成 为 浙 进 无 偏 估计 量 。 
综 上 分 析 ,第 一 类 随机 性 大 识 问题 的 梯度 校正 渐进 无 偏 估计 算法 应 为 
8(R+I) = [T+ 天 (下 ) 王 ] 看 ( 友 )+ 民 (下 )3( 天 )[ (并 ) 一 开工 二) 看 (天 ) ] 
(4.73) 
式 中 , 步 长 间隔 二 的 选择 必须 使 第 一 类 问题 的 条 件 {2) 得 到 满足 ;及 () 为 权 和 矩阵 ， 
稍 后 将 进一步 讨论 ! 和 玉 (E) 的 选择 问题 ; 五 是 输 人 向 量 且 人 (z) 的 测量 噪声 8 ) 
的 协 方 莽 阵 , 需 先知 道 ;xr(E) 和 z(E) 是 可 测 的 输入 输出 数据 。 


2. 第 二 类 随机 性 内 识 问 题 的 梯度 校正 钠 进 无 偏 估 计算 法 
在 第 二 类 随机 人 性 辩 识 问题 中 ,由 于 = 五 |() oo( 开 让 天 0 所 以 为 了 获得 参 
数 的 渐进 无 偏 估 计 ,类 似 于 第 一 类 问题 的 分 析 , 必须 在 式 (4.65) 的 右边 增加 两 项 ， 
玉 () 五 攻 () 和 一 玉 (R)T。 于 是 第 二 类 随机 性 辨识 问题 的 梯度 校正 渐进 无 篇 佑 
计 写 成 
闪 ( 有 + 站 =[T+ 玲 () 瑟 ] 站 (有 ) 一 下 (天 )T 十 认 ( 友 Jr 下 [zs( 天 ) 一 TCR) 站 (天 )] 
【4.74) 
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式 中 ,变量 的 含义 与 式 ({4.73) 相 同 。 这 里 不 仅 要 求 五 此 须 是 已 郑 的 ,而 且 Ta 也 
是 已 知 的 。 从 图 4.8 可 以 看 出 , 产 () 是 参数 bo 的 函数 ,也 就 是 说 Tz 是 bo 的 函 
数 。 不 妨 设 T, 是 加 的 线性 函数 ,写成 
IT; = 和 下 jb (4.75) 

式 中 是 N 维 向 量 , 邮 是 NxN 维 矩 阵 ,在 特定 条 件 下 它们 可 以 事先 确定 。 当 
然 ,T 与 bu 的 关系 不 一 定 都 写成 式 (4.75) 的 形式 ,也 可 以 根据 实际 问题 具体 确定 
郴 数 关系 。 

下 面 着 重 讨论 T， 与 bg 的 关系 取 式 (4.75) 时 ,第 二 类 随机 性 辩 识 问题 的 梯度 
校正 无 偏 算法 。 

根据 式 (4.75) ,IT 的 估计 值 应 为 


他) = 和 上 + MI 让 () (4.76》 
若 式 (4.74) 中 的 三 用 人 代 蔡 , 则 第 二 类 随机 性 辨识 问题 的 梯度 校正 估计 算法 可 
写成 
(ET 一 [E+R(RE) 王 一 玉 ( 开 )A9] 全 (R) 一 下 () 人 


十 及 ( 开 Je( 二 )[ zf( 克 ) 一 工 工 到) 站 ( 开 )] [4.77) 
类 位于 定理 4.2, 有 
正午 ( 开 二 站 | = 五 | 人 (| + 妥 (k) 人 (+RM)8 一 玉 ( 人 (人 FT) 看 (| 
(4.78) 
im 下 BC) = en (4.79) 
和 


可 见 , 算 法 (4.77) 给 出 了 渐进 无 人 往 估计 。 其 中 ! 的 选择 必须 保证 第 二 类 辨识 问题 
的 条 件 (21 成 立 ; 肌 (下 ) 为 权 和 矩阵, 它 的 具体 选择 下 面 将 具体 讨论 ;4 和 艇 为 参 蛮 
量 ,结合 实际 回 题 可 以 惟一 确定 ;其 他 变量 与 第 -一 类 辨识 问题 一 样 。 


3, 步 长 癌 隔 的 选择 


不 论 第 …- 类 随机 性 辨识 问题 的 斯 进 无 俩 估 计算 法 (4.73), 还 是 第 二 类 随机 性 
辩 识 问题 的 渐进 无 俱 估 计算 法 (4,77) ,都 要 选择 步 长 回 隔 了 虐 使 输 人 向 量 卢 (&) 与 参 
数 估计 信 亲 (&) 不 相关 。 式 (4.73) 或 (4.77) 表 本 ,9(R+ 站 是 请 () .号 ( 下 ) SR) 和 
(的 函数 ,可 表示 成 
亩 (有 下 2) 二 凑 闪 () 天 ( 开 ) ,8( 皮 ) zu( 下 )) (4.80》 
当 六 =0 时 ,有 


一 一 = 


-108 系 纯 国 识 及 其 MATLAB 仿真 





BR) = FrB(0),P0),st0) ,tt0)) = 81(B(C0) ,有 (0),s(0) ,ro(D)) 
(4 ,81》 
当天 三 时 ,有 
和 (27 1) 一 产 间 (和 (1 门 ，8 人 af 
= FFCBL0)),i(O0)s00) zf0 ,Riseft)) (4.82) 


一 if(B0) ,RE(0).8607 (0 站 全 8 人 
以 还 类 扒 , 有 


站 (ze := FL 一) 一 0 一 of 一) 


一 可 ( 音 (0) ,有 (0) 80) rzo(0)， ,和 (ze 一 ) 下 (el 一 站 )， 
SP 一 2 一 了 《二 .83) 
式 中 ， Fe) gm 表示 某 种 是 数 关 系 。 式 (44.83) 表 明 。 是 一 歼 旨 


时 刻 的 参数 佑 计 值 和 (人 ) 与 到 -=- 时 刻 以 前 的 信息 (包括 输 人 向 量 (0)，……， 
天 (一 门 , 输 人 测量 曝 声 0) ，s(- 站) 和 输出 测量 噪声 10) ， 吧 (一 站 )) 


是 相关 的 。 这 样 , 选 择 ! 使 输 人 向 量 产 () 与 参数 估计 值 #E) 不 相关 问题 就 转变 
成 选择 ! 使 疡 人才 ) 与 (二 -站 时 刻 以 前 的 信息 (包括 天 (5 和 证 (二 0,1， 
2，…, 导 一 站 不 相关 问题 。 根 据 第 一 .二 类 随机 性 辨识 问题 的 条 件 , 已 知 产 () 与 
(& 一 站 时 刻 前 的 5 和 加 (人 =0,1,2,，…, 天 一 不 相关 ,所 以 只 要 选择 :使 
Ri ) 与 三 ( 开 一 站 不 相关 ,就 能 使 第 一 、 二 类 随机 性 因 识 问题 的 条 件 (2) 上 成立, 保证 
式 (4.73) 和 (4.77) 都 是 渐进 无 偏 估 计算 法 。 也 就 是 说 , 步 长 间隔 的 选择 必须 使 
输 和 人 向 量 产 () 与 声 估 一 站 是 统计 不 相关 的 。 这 是 选择 : 的 基本 出 发 点 ,具体 问题 
还 要 具体 考虑 。 比 如 ,如 果 系 统 的 模型 采用 * 阶 差分 方程 形式 , 则 步 长 间隔 ! 不 
能 小 于 阶 次 二 ,以 保证 产 (有 与 天 ( 于 一 六 不 相关 。 


4, 权 答 阵 及 (RE) 的 选择 


第 一 .二 类 随机 性 辨识 问题 的 梯度 校正 算法 (4.73) 和 (4,77), 当 选择 : 使 
下 (8 与 严 导 一 门 不 相关 时 ,它们 都 是 渐进 无 偏 估计 算法 。 但 是 ,渐进 无 仿 售 计 不 
一 定 是 均 方 一 致 佑 计 或 依 概率 1 一 致 估计 , 即 有 


lin 三 1 站 上) = 加 (4,84) 
但 不 一 定 有 
lmE|1B(t) - pl = (4.85) 


或 概率 为 1, 即 
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Probt lim pt)= 6 =1 (4.86) 
为 了 使 式 (4.73) 和 (4.77) 算 法 同时 又 是 一 致 估计 ,需要 适当 选择 权 抢 阵 玉 ()。 
下 面 将 随机 人 性 问题 的 梯度 校正 参数 辨识 算法 及 权 夭 阵 的 选择 归纳 成 定理 4.3。 
定理 4.3 第 一 类 随机 辨识 问题 的 梯度 校正 渐进 无 偏 估计 算法 为 
好 (大 上 7) = [7TTT 届 () 五 ] 在 () 十 机 [下 ) 荆 (二 )e( 克 ) [4 .87) 
第 二 类 随机 性 辨识 问题 的 梯度 校正 渐进 无 偏 估计 算法 为 
站 (有 + 站 二 [TFT+ 下 (下 ) 瑟 一 及 (类 )RME] 辣 (R) 一 下 (有 )4 十 及 (Txt 下 JE 上 ) 
《4.88 ) 
式 中 , 残 差 s(&) = 人 一 AT)E(E)S zx) 与 (天 ) 是 可 测 输入 输出 数据 ; 马 是 
输入 向 莉 产 人) 测量 只 声 的 协 方差 阵 ; 参 变量 和 AM 根据 具体 问题 事先 确定 ; 步 长 
间隔 : 必须 使 输 和 向量 真 ( 开 ) 与 下 (下 下) 不 相关 ; 昌 有 
下 | ze < oo 
五 于 | (下 7 2 人 (二 72zT(R)| 站 (二 )| < 妇 ce (4.89) 
瓦 站 xs 天) 上 2eo2f( 二 7 全 ( 且 ) 上 < oo 
zz 有) 是 输出 的 调 量 噪声 。 如 果 权 矩阵 选择 如 下 形式 
及 (RN = CURidiaglAi(E] AR) AN ] (4 .90》 
式 中 
0< 4 直 (有 4ccoi=l2 NON= dimg) 


cf > 0YRilimec(R) 一 0 (4.91 ) 


So 有 co》 ea2( 有 < 


则 参数 估计 值 旬 (+ 站 在 均 方 意义 下 是 一 致 收敛 的 ,或 是 依 概率 1 一 致 收 伍 的 。 
定理 4.3 的 儿 点 说 明 : 
(1) 条 件 (4.89) 是 很 弱 的 ,一般 问题 都 能 解决 。 
(2) 权 生 阵 及 (CE) 中 <) 可 取 
1 


c(4) = 太 ， 本 <2s14>0 (4.92) 

它 能 满足 式 (4.91) 的 要 求 。 
(3) 式 (4.91) 是 保证 六 人 ) 一 致 收敛 条 件 ,但 站 (天 ) 不 一 定 有 最 快 的 收敛 速 度 。 
为 了 加 快 刘 (&E) 的 收 伍 速 度 , 权 怎 阵 丸 (R) 可 分 跋 选 择 。 在 递 推 计算 前 期 , 民 (R) 可 
用 Lyapunes 最 佳 权 值 矩 阵 形式 ,如 式 {4.39) 所 示 , 以 便 加 速 请 () 的 收 伍 速度 。 在 


-一 -一 -一 一 一 -一 二 一 一 一 一 一 “一 一 一 --- 二 -- 
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递 推 计 算 后 期 , 民 () 必 须 采 用 式 (4.0%) 的 形式 ,以 保证 页 有) 的 一 致 收 伍 的 。 
例 4.1 随机 人 性 梯 麻 校正 法 在 三 阶 空气 动力 学 系统 中 的 应 用 [s 。 











图 4.10 三 阶 空气 动力 学 系统 


设 一 个 三 阶 的 空气 动力 学 系统 如 图 4.10 所 示 。 图 中 ,N 是 沿 着 = 轴 的 加 束 
度 输入 量 ; 8 是 表面 倾斜 重 ; M* 是 表面 倾斜 量 系数 ;6 是 刚体 加 速度 ; e 是 仰角 ; 
AM. 是 转 矩 系数 4z 是 轴 向 速度 ; N, 是 沿 着 = 轴 的 加 速度 输出 量 ; Z 是 加 速度 系 
数 ;KN 、Ks .Kv 为 对 应 控制 器 的 增益 ; M. 、.M; 和 2 是 时 变 参数 。 由 图 4.10 直接 
可 得 


上 (下 ) = MG(R) + MOR) 
车 ,93 
da = Di( 肛 ) (931 


式 中 ,BR et 人 (kJ) SG(E) IN (RE) 是 可 测 的 变量 ,其 测 量 噪声 分 别 是 均值 为 零 . 方 差 
为 oj、 oa 的 不 相关 随机 虽 声 , 记 作 az、rzos os、rzow :对 应 的 测量 值 为 
有 《RE) 二 人 (二 ) 十 本 Ci 中) 二 站 [ 下) 十 证 《4 .94a 1 
(全 = 3 让， NO = Nt (4.94b) 
如 果 控 制 器 的 增益 天 w 、Ks 、 开 w 满足 如 下 关系 


六 N 一 





[4.95) 


加 2 十 100XMd。 
-100M 一 也 


根据 每 逊 公式, 有 
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51 _ 性 3 (4 961 


3 1845Z.，， 
5 十 1100 二 
天 








8 十 C 有 1 十 尼 3 
设 ci= 1400,c= 14000, 目 二 “很 小 ,那么 
(5) _ 14000 
is] 53+100s2 + 1400s + 14000 
这 就 是 说 , 当 控 制 器 增益 EN 、Ke 、Kw 满足 式 (4.95) 时 ,系统 的 闭环 传递 函数 为 
(4.97) ,其 闭环 阶 跃 响应 的 带宽 为 2cps, ,衰减 率 为 0.6, 系 统 无 静态 偏差 。 为 了 使 
系统 始终 具有 这 样 的 闭环 阶 夏 响应 特性 , 必须 使 控制 器 增 普 Kv Ka、 天 v 随 人 4 、 
Az 和 2 变化 ,实现 自 适 应 控制 。 但 是 , M. .As 和 乙 是 未 知 的 时 变 参 数 ,这 里 用 
樟 度 校正 法 获得 它们 的 实时 估计 值 ,并 代入 式 (4.95) ,使 增益 Kv .Ka . 玫 v 适应 系 
统 参 数 的 变化 。 
根据 所 给 的 条 件 ,参数 M. AM 和 亏 的 辩 识 问题 属于 第 一 类 随机 性 辨识 问 
题 。 根 据 定理 4.3, 和 参数 M., .Ms 和 乙 的 梯度 校正 渐 近 无 仿 估 计算 法 为 
1) 当 生 有 时 (1 为 某 选 定 的 整数 》 





《4.97 ) 











、 Ai Alanm(k)9 (到 ) 
雇 人 + = | 所 () 1 人 er 
(4.98a ) 
_ Ac3 人 (二 ) 信 (天 ) 
一 | TL + 一 一 一 一 一 一 一 
十) ET 人 
(4.98b) 
六 《下 十 1) 一 [5 《下 )》 十 NA) 
“ 02 (是 an (RE) 
{4.98c) 


式 中 ,4 和 汪 : 为 加 权 值 ,需要 事先 确定 ;ooi 和 eg 为 噪声 方差 ,假设 是 已 知 的 ; 

且 

人 = 让 ( 昌 一 及 (Jan(E) 一 放 (E)6s(E) 

(4 .99】 
Ne) = Na (CE) 一 之 (Jam( 开 ) 


(2) 当下 > 时 
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1 an 

了 (+1) = 1 十 全 2 入 ( 有 + 生计 有 

A2a3 1 26 (二 ) 

《ER +1) 一 1 (4.1007 





好 已 天 
0 + 1]) = [ 十 全 所 (6 十 和 

递 推 计算 的 前 期 (E 扫 上) 采用 算式 (4.98), 目的 为 了 加 快 参数 估计 值 的 收 繁 速 
度 ; 递 推 计算 的 后 期 ( 直 > 有 ) ,采用 算式 (4.100) ,可 保证 参数 估计 值 是 一 致 收敛 
的 。 

下 面 给 出 该 例 的 模拟 结果 。 已 知 叶 =0.061,c3 =0.016, 咯 =3.0; Ad = S00， 
AM =1000; 取 而.(0)=250,W0)= 5300,4 =0.1,4; =1;A1=52; 加 速度 输入 量 
如 图 4.11 所 示 , 作 用 时 间 为 0.5s;6. (kJ)、 ae) 和 (ke) 的 采样 时 间 为 
0.91s; 采 用 算式 (4.98) 一 (4,100) , 递 推 计算 52 步 后 ,参数 M。 和 As 的 们 计 值 就 
基本 上 稳定 在 500 和 1000 附近 。 利 用 参数 辩 识 的 结果 ,代入 式 (4.95) ,计算 控制 
器 的 增益 ,组 成 自 适 应 控制 系统 ,可 使 系统 的 闭环 阶 姑 响应 特性 始终 满足 设计 要 
求 。 





0 DLL 02 803 04 05 3 


图 4.1t1 扣 有 速度 输 人 量 


该 例 说明 ,在 一 定 的 条 件 下 ,梯度 校 正法 可 用 于 实时 在 线 办 识 。 它 的 显 着 优 反 
是 计算 最 小 ,但 它 要 求 预先 知道 癌 声 的 统计 特性 ,这 是 它 的 缺点 。 


4.4 梯度 校正 法 在 动态 过 程 辩 识 中 的 应 用 


本 节 将 研究 如 何 利用 梯度 校正 法 来 解决 状态 方程 和 差分 方程 丙种 模型 的 参数 
辨识 问题 ,其 中 如 何 确定 参 变 量 4 和 M 是 问题 的 关键 。 
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4.4.T 状态 方程 的 参数 办 识 


设 一 个 SISO 系统 用 状态 方程 描述 如 下 : 
(上 二 十 上 ) 一 瘦 克 下》 十 相 (并 ) 十 可 (下 】 





(6) = 5 0 
式 由 
U Ji 
让 = (4.102a) 
El 
让 
| = [323 (4.102D) 
e = [OO 


w( 丰 ) 是 均值 为 零 ,方差 为 zz 的 不 相关 随机 系统 噪声 ;4 是 吗 声 模型 参数 向 量 , 假 

定 它 是 已 知 的 ;4 和 为 未 知 竺 辨识 的 模型 参数 ;输入 输出 变量 x(K) 和 ?人 ) 对 

应 的 测量 值 记 作 

了 () 盖 让 下 十 了 

中 一 十) 

5 和 w(R) 分 别 是 均值 为 符 方 关 为 nx 和 o 的 不 相关 随机 测量 噪声 , 昌 *() 和 

of(&) 是 统计 独立 的 。 

状态 方程 (4.101) 对 应 的 差分 方程 为 
3 天) 十 友 3 人 二 有 十 和 
一 曙 让 (下 一 二 十 十 可 下 (下 一 下 )》 十 本 人 (下 一 1 十 和 十 泛 全 人才 一 天 

【4.104) 


[4.103) 





式 中 
站 一 [50 T 一 了 让 


可 = [aiead TI== Pd 
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天 [有 ) 一 [ 呈 是 一 1 93 一下] (天 一 二 让 1 

[下 ) 一 [zs( 开 一 下 (二 一 让) 全 一 1 一 )]T 

8 = [一 ai 

8( 开 ) 一 和 oo( 雪 一] 人 一 下 (下 一 二 vs 一 三] 

ef( 虹 )》 = 罗 (二 ) 十 故 鲍 ( 虹 一 上 十 十 十 加 (二 一 站) 一 区 (二 )》 十 可 T 开 ) 


的 (RE) 一 [afE 一 1of 开 一 并 
《4.106) 


上 = 下 (天 ) 十 中 天] 
zf 到) 一 正 区 (和 二 ef 下 ) 
与 式 {4.50) 比 较 可 知 ,状态 方 竹 (4.101 的 参数 辨识 问题 已 化 成 第 二 类 随机 人 性 梯度 
校正 参数 辨识 问题 。 应 用 定理 4.3, 可 得 参数 8 的 渐进 无 偏 估计 算法 为 


和 (ET+TP) = [TI+ 民 (天 ) 瑟 一 及 (R)ME] 阁 () 一 玉 ( 开 ) 和 十 屁 ( 天 )X{ 开 )E() 
《4.103 1) 
式 中 , 残 差 es(R)= <() 一 2I()G0EJ3TCE) 由 可 测 的 输入 输出 数据 zx{ 7 和 =(…) 
组 成 ; 步 长 间隔 工 取 大 于 的 值 ,以 保证 下 引 ) 与 严 仆 一 站 不 相关 ; 瑟 表示 噪声 向 
量 st 的 协 方差 阵 ,根据 sf) 的 定义 ,有 


[4.107) 








2 了 必 
互 = 下 ls(t)sT()| = | 一 (4.109) 
0 
要 求 吾 是 已 知 的 ;入 矩阵 只 58) 取 
及 {) 二 -diag[ Ai( 有 ,hz( 有 )， 4an( 有 ] 
(4.110) 
六 二 入 所 10<S Ar 下 (和 站 后 人 二 2 2 
参 变 量 ) 和 M4 满足 下 列 关系 
已 1ROEye(g 计 = 和 +NM60 (4.1117) 
80 为 系统 参数 真 值 。 


综 上 所 述 , 若 确定 了 参 变量 4 和 M , 则 参数 9 的 估计 值 可 按 式 (4.108) 递 摊 计 
算 。 下 面具 体 讨 论 参 变量 1 和 j 的 求法 。 钊 得 注意 的 是 :对 不 同 的 问题 ,和 
的 求法 是 不 同 的 。 

(1) 解 状态 方程 (4.101) ,得 
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区 () = (0) + > 刺 -[ 到 GD+EG-D] 《4.112) 
且 输 出 变量 可 表示 成 
二) 一 0 古 三 0 + ci 和 人-1) + 人 -1 (4.113) 


(2) 确定 五 | 站 ( 开 )8(R | 与 6 的 函数 关系 。 根据 式 (4.106) 中 下 (RetE) 的 
定 艾 ,利用 式 (4.113) 的 结果 , 同时 注意 到 具 声 wo) 和 za 人 的 统计 等 性 分 别 是 
零 均 值 的 百 品 声 ， 且 相互 独立 ,并 与 &(E) 不 相关 , 则 有 

五 1 (二 - 工 Te7 帮 了 | 


上 - 
= 了 41 FEjial 一 1oT(E)d = 2[0 本 9 


ar mr 寺 一 卫 上 
一 2 + > 二 1 -之 遇 好 + 2 0 0,…,0]8 
一 | za 一 二 1=] 
(4.114a) 
四 2)2()| 
2 [0， 心 ， 本 1 ca， 了 
一 人 噶 一 ] 刘 一 人 
二 史 > 地 也 4 +o2|- 忆 : ci ， 一 > 地， 
二 1 = = 
有 一 了 1 
-2 了 0 (4.114b) 
1 


[0 ,0 三 | jp 


1 ] 1 
一 G221G。 十 gu 2| - >， 加 这 和 一 >， 过 ， 中 1， 一 >， 23,0，……,0]8 
f=1 


《4.114eo) 
区 和 (一 Jefg)j =0 (4.114d) 
由 此 可 得 
王 { 有 (RefgE 计 一 和 + 《4 .115) 
了 一 1 并 一 之 1 工 
) = 2 之 cidsl，。 可 二， 2 世 RRzn+1 


(4.116a) 
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1 
-之 宙 - 24 -- 4 -2 4 0 0 
-2 呈 - 了 1 
一 宝 -之 34 -了 亏本 0 0 
拓 =] 
开 - 加 
一 中 人 0 
所 | 
末 = 一 
一 之 灾 0 0 
(对 称 于 上 三 角 | 0 … 0 
0 
《4.116b) 


式 {4.116b)} 表 明 , 参 变量 ; 和 M 由 噪声 模型 的 参数 向 量 了 组 成 . 当 d 已 知 时 , 参 
变量 4 和 本 可 惟一 确定 。 

上 述 分 析 表 明 ， 当 状态 方程 (4,.1017 的 噪声 模型 参数 向 量 纪 及 噪声 wm()、 
sf 和 芭 () 的 方差 vc2 .o: 和 于 已 知 时 , 式 {4.101) 的 待 辩 识 参数 8 可 利用 梯度 
校正 法 来 确定 。 然 而 ,由 于 梯度 校正 法 用 于 状态 方程 参数 辩 识 时 ,对 了 暴 声 特性 的 先 
验 知识 要 求 过 高 ,这 将 限制 它 的 使 用 范围 。 


4.4.2 差分 方程 的 参数 办 识 


设 一 个 SISO 系统 用 差分 方程 描述 如 下 
人 十 CI13( 二 一 1 十 十 Go 下 一 入 ) 
一 站 了 (二 一身 十 十 下 下 (人 开 一 天) 十 碗 (一 1 十 入 十 (下 一 天 
《4.117) 

式 中 , 引 .0=1,2,……2) 是 候 定 已 知 的 虞 声 模 型 参数 ;ai; 和 访 (=1,2,…,1) 是 未 
知 待 辨识 的 系统 模型 参数 ; 输 人 输出 变量 xz(&) 和 y() 含 有 测量 了 蝇 声 , 如 式 
(4.103) 所 示 。 噪 声 om(R) 5 和 mo() 的 统计 特性 与 4.4.1 小 节 所 给 的 条 件 相 
同 。 与 方程 (4.104) 一 样 , 式 (4.117) 也 可 化 成 第 二 类 随机 性 梯度 校正 参数 辨 识 问 
题 , 如 式 (4.106) 和 (4.107) 所 示 。 同 理 , 利 用 梯度 校正 法 来 解决 式 (4.117) 的 参数 
辨识 问题 , 带 要 确定 Ta = 王 1a(E)e(E) 的 关系 。 类 似 于 4.4.1 小 节 中 
王 | (Re(E)i 的 推导 ,可 得 1 为 


一 一 -一 一 = memn-rmmve 
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[2 23 0] 天 -1 

ca.0]p 1 了 
T- = o : 所 R2nzl (4.118) 

[2 .0 …;0]p-14 
0 
式 中 ,上 罕 阵 王 如 式 人 .105) 所 示 j 为 已 知 的 噪声 模型 参数 。 由 于 了 不 能 化 成 bu 
的 线性 印 数 , 参 变 量 4 和 无 法 确定 。 但 是 ,如 果 式 (4.118) 中 的 五 用 了 = 
中 ze 代替 , 则 可 直接 利用 式 (4.74) 算 法 来 估计 式 (44.117) 的 模型 参数 8。 若 方程 
(4.117) 的 阶 次 m 委 3, 则 T2 可 化 成 g 的 线性 函数 。 这 时 又 可 利用 式 (4.108) 估 
计 模 型 参数 98。 托 如 , 当 #*=3 时 ,有 


dcsD0000 
0 
必 
4 =o2faia+eadodaaldasi000;0T， 本 = oo 0 0 
0 
[4.119) 


显 琢 ,梯度 校正 法 用 于 差分 方程 的 参数 辨识 时 ,要求 噪声 模型 参数 4 及 噪声 w(E)》、 
5 和 wk) 的 方差 mw .as 和 zw 必须 是 已 知 的 。 这 将 大 大 限制 梯度 校正 法 的 使 
用 范 菌 。 


4.5 随机 有 逼近 法 


随机 禹 近 法 是 一 种 颇 受 重视 的 参数 估计 方法 , 它 赂 于 梯度 校正 法 。 
4.5.1 随机 带 近 原理 


考虑 模型 辨识 问题 
zx 有 ) 一 天 于) 全 十 e() (4.120) 
式 中 ,e(&) 是 均值 为 零 的 噪声 。 显 然 ,这 种 模型 的 参数 办 识 问题 可 以 通过 极 小 化 
e( 有 ) 的 方差 来 实现 , 即 求 参数 6 的 估计 值 ,使 下 列 准则 函数 达到 极 小 值 
7(8) = 去 Bie(1 = 二 EI[z( 妇 -Ar(E8] (4.120 


该 准则 画 阁 的 一 阶 负 梯度 为 
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工 
| - 也 人 | - IRCE[z(E) -TCD)8]| (4.122) 
令 其 梯度 为 零 
瓦 | 大 (天 7 苹 ( 二 ) 一 下 (天 ) 和 | 19 亲王 (4.123) 


原则 上 说 ,由 式 (4.123) 可 以 求 得 使 上 (98) = min 的 参数 估计 值 8。 但 是 ,因为 (RE) 
的 统计 特性 不 知道 ,因此 实际 上 还 是 无 法 求 出 式 (4.123) 的 解 。 如 果 式 (4.123) 严 
边 的 数学 期 望 用 平均 值 来 近似 ,即将 式 (4.123) 近 似 写 成 


了 j(&)[z(e) -TCR) 人 =0 [4.124) 
则 有 
了 -LT 
在 = 耻 5 取 ist (4.125) 
囊 = 上 吓 二 荆 


显然 ,这 种 近似 使 问题 退化 成 最 小 二 乘 问题 , 式 (4.125) 就 是 第 3 章 讨 论 的 最 小 二 
乘 解 。 下 面 研 究 式 (4.123) 的 随机 通 近 和 解 。 
设 z 是 标量 ,y(&) 是 对 应 的 随机 变量 ,p(y|z) 是 条件 下 y 的 概率 密度 函 
数 , 则 随机 变量 " 关于 > 的 条 件数 学 期 望 为 
Ely lzl= | ydpgyiz) (4 .126》 
记 和 作 
站 (了 ) 一 瓦 )y | | 《4.127) 
它 是 x 的 函数 , 称 作 回归 函数 ， 
对 于 给 定 的 " , 设 方程 
天 (rz) = 五 11 = {4.128 ) 
具有 惟一 解 。 当 PCz ) 函 数 的 形式 及 条 件 概率 密度 函数 p(y|z) 都 不 知道 时 , 求 方 
穆 (4.128) 的 解析 解 是 困难 的 ,这 时 可 以 利用 随机 通 近 法 来 求解 。 所 谓 的 随机 遇 近 
法 就 是 和 用 变量 zi ,za,… 及 其 对 应 的 随机 变量 y(zi),y(zz),…， 通过 选 代 计 
算 ,逐步 通 近 方程 (4.128) 的 解 。 常用 的 送 代 法 有 Rebbins-Monro 算法 和 Kicfer- 
Wolfowitz 算法 。 


1，Robbins-Monro 工法 


求解 式 (6.128) 的 Rebbins-Monro 算法 为 
(下 十 1) = 区 (十 间 ( 开 [ea 一 3 你 ( 生 1 4-1291 
式 中 ,y(zt 人 7 是 对 应 于 z(g) 的 y 值 :of ) 称 作 收 伍 因 村 。 如 果 收 委 因 子 满 足下 
列 条 件 
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(下 ) >> 0,YAilimpo( 友 ) = 0 
{4.130) 


PURE) = oo :之 po2(&) < co 
则 z( 有 在 均 方 意义 下 收 伍 于 方程 (7. 128) 的 解 。 满足 式 (4.130) 条 件 的 收 伍 因 
子 , 最 简单 的 有 p( 人 = 工 或 p( 和 = 二 
Wolfowitz 进一步 证 实 , 当 
| [y 一 兵 袜 ) 二 dp(3 |) < coi 


(2) | 中 (| 安 c 上 如一 o 扫 六 oo) 
3) 下) 太 站 【 妇 定 四 和 有 人 冤 在 【《 定 交 0) 
《4) 对 0<86<pc<c 的 任意 人 和 82, 存在 


if | 次 《 一 站 10 《 生 .1311) 
雪 1 芋 一 rs 人 


时 ,Robbins-Menro 算法 恢 概 率 1 收 伍 于 走 值 解 xo, 即 
Probi imz(&) = zl 一 】 《4.132) 


2. Kiefer-Wolfowitz 算法 
Robbios-Monro 算法 -~ 般 是 用 来 求 方程 (4.128) 的 根 。 后 来 , Kiefer 和 更 ol- 
fowitz 引用 它 来 确定 回归 函数 六 (z) 的 极 值 。 如 果 回 好 函数 交 (z) 存 在 极 值 ,那么 
Ah(z) 取 极 值 未 的 z 使 得 呈 人 = 0。 根 据 Robbins Monro 算法 ,Kiefer 和 Wo 
fowitz 给 出 了 求 回归 函数 1(G 衣 值 的 技 代 算 法 
z(+1) = (一 OK 生 Le (4.133) 
式 中 ,如 果 收 敛 因子 p(& ) 满 足 Robbins-Monro 算法 条 件 , 则 Kiefer-Wollowitz 算 东 


是 收 伍 的 , 即 z(R) 的 收 伍 值 将 使 产 (z( 人 二) 达到 极 值 。 
KieferWolfowitz 算法 可 以 直接 推广 到 多 维 的 情况 。 考虑 标量 函数 J(8) 的 极 


值 问题 ,如 果 J 了 (6) 在 8 点 上 取得 极 值 ,那么 求 好 的 选 代 算法 为 


DJ 
3 


站 ( 开 + 二 ) = 在 () 一 (4.134) 





如 果 收 敛 因子 e( 友 ) 满 足 式 (4.130) 的 条 件 ,那么 8(E) 在 均 方 意义 下 收敛 于 真 
值 g 

JimEf[BCA) - bo] LS -bo =0 (4.135)》 
KieferWoifowitz 算法 是 随机 逼近 法 的 基础 !so' 。 
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例 4.2 设 回 归 冰 数 


hz) = 六 BEi[z(t) -zl (4.136) 
求 六 z) 取 极 小 值 时 的 z 值 。 
解 ”根据 式 (4.133) ,有 
丈 { 开 )》 一 交 ( 有 一 1)+PpE[zE) 一 工 ( 炬 一 1] (4.137) 
取 6( 久 = 过, 风 
开工 { 开 ) 一 【下 一 1) 祥 ( 开 一 二 ) 十 肥 ( 到 ) 《4.138) 


设 交 (人 和 xz(z) 的 zx 变换 分 别 为 &(z) 和 2Z(z) ,并 利用 z 变换 公式 
&F(UEJee -> _P(z) 
交 





{4 .139) 
2 AD 一 FE(s) 
可 得 
d 1 
本 (z) = 《4.140) 
反 变 换 后 ,有 
工 (点 ) 一 二 z() (4.141) 


使 得 六 z)=Imin。 式 (4.141) 表 明 ,使 ARCz) 达 到 极 小 值 的 = 为 观测 值 的 均值 ,这 
是 符合 物理 意义 的 。 


4.5.2 随机 通 近 参数 估计 方法 


考虑 模型 (4.1207 的 参数 辨识 问题 。 设 准则 函数 为 
(6) = 王 [大 (有 有 | . 《4.142] 
式 中 ,天 [为 某 标量 末 数 ;D 表示 时 刻 以 前 的 输 人 输出 数据 和 集合。 显然 ,准则 
函数 的 一 阶 负 梯度 为 
[- 芝 允 | = [上 |- (Dj ] = 瓦 19(8 De 《4.143) 
那么 模型 (4.120) 的 辨识 问题 归结 成 求解 方 释 
五 19 8 了 | 一 有 [4.1441) 


利用 随机 逼近 原理 ,有 
站 (上 ) = 站 (有 一 1)+p( 有 )8E 人 一 1 下 (4.145》 
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式 中 ,po(&) 为 收 伍 因 子 ,必须 满足 式 (4.130) 的 条 件 。 如 果 J(B8) 歌 式 (4.1211) 作 为 
准 出 范 数 , 则 式 (4.145) 瑟 成 

站 () = 人 (有 一 1) + 下 RCREITefE)》 一 下 TCR) BR 一 1] (4.146) 
该 式 是 利用 随机 通 近 法 解决 模型 (4.120) 辩 识 问题 的 基本 公式 。 下 面具 体 讨 论 差 


分 方程 的 参数 辨识 问题 。 
考虑 模型 
册 (z yy( 有 ) 一 吾 (z af 下) 十 王 ( 二 ) (4.147) 


式 中 ,5( 旭 是 均值 为 零 . 方 差 为 cx 的 不 相关 噪声 ; 输 和 人 输出 数据 对 应 的 测量 值 为 
(一 二) 
区 [) 一 如 下) 十 语 ( 下 ] 
式 中 ,5 和 世人 (2) 分 别 是 均值 为 零 . 方 差 为 os 和 ea 的 不 相关 戎 机 噪声 , 且 
vs) 和 2 在 统计 上 两 两 不 相关 ; 且 


(4.148) 





册 (z 1 =1T+Gizg 十 C22 十 十 和 
间 半 一 正光 十 站 二 44.149) 
模型 (4.147) 可 化 成 最 小 二 乘 格 式 
zf 天) 一 站 I( 二 ) 候 十 e() (4.1S0) 


式 中 
呈 = [一 z( 和 一 1 一 允 (下 一 me) 一 1 一 25] 


一 工 
和 = [elaa yan ,BiB2，cBo] 


ef 此 )》 一 次 (z Tsef) 一 且 (z 5 十 要 (人形 ) 


{ 了 ,15S1) 
显然 ,噪声 e() 具 有 如 下 特性 
瓦 je(k)| 一 站 
吾 fefiyef7)| 一 有 限 值 ，， 了 安 天 二 Inaxfpae ab) (4.15S2)》 
昌 ， | 一 于 |2 担 


五 ETfEDetc 天 0 
根据 式 (4.121) , 取 准 则 函数 为 


1(6) = 二 Ei[z(E+ ma) -HT(+m8| (4.153) 


利用 随机 逼近 原理 ,可 得 参数 和 估计 值 的 Isermann 随机 逼近 算法 


站 (+m) = 站 (E-1)+p0)R( 开 十 mi[s( 十 ) 一 和 人 ( 开 十 办 7 站 ( 一 寺 ] 


下 一 了 工 , 手 十 了 2 十 汪 
《4.154) 
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式 中 ,为 了 避免 误差 积累 ,所 用 的 数据 必须 是 互 不 相关 的 ,或 者 说 数据 中 所 含 的 品 
声 e() 必 须 是 统计 独立 的 。 根 据 式 (4.152) ,如 果 每 隔 ”+ 1 时刻 递 推 计算 一 次 ， 
则 可 满足 这 一 雪 求 。 收 敛 因 子 (7 ) 必 须 满足 式 (4.130) 的 条 件 , 自 变量 ! 可 取 ! = 
&_1 或 1= 二 1。 一 般 说 来 ,p(7) 随 着 上 的 增加 要 有 尼 够 的 下 降 速度 ,但 o(D) 不 


能 下 降 得 术 快 ,将 则 被 处 理 的 数据 总 量 本 少 。Isermann 曾 推荐 一 种 选择 of 站 的 方 
法 ,如 图 4.12 所 示 。 


问 ( 


1 
”20+0501-100} 





图 4.12 牙 伍 因子 ef8 的 选择 
值得 注意 的 是 , 式 人 4.154) 算 法 所 获得 的 参数 估计 值 是 有 人 往 的 。 因 为 ,根据 式 
(4.123) ,由 准则 画 数 (4.15S37》 斌 得 
站 = 有 | 大 (二 十 天) 下 IT 十 天 让] 1 瑟 | 下 { 玫 十 交 )2( 十 天 计 
一 和 十 [五 | 天 { 雪 十 天 ?天 划 开 十 天 ) 卜 -下 | 下 (十 天 Je 十 天 外头 的 
[4 ,155) 
式 中 


om | 0 


ua 1 。 让 
人 四 《二 .156) 


可 见 , 式 (4.154) 算 法 是 有 偏 估计 。 如 果 把 式 (4.156) 这 项 偏差 引 人 算 法 , 则 可 
得 到 一 种 修正 的 随机 和 逼近 算法 一 一 相 良 节 夫 随机 通 近 法 。 





下 了 下 ( 开 + 囊 ) ee 下 十 严 ] } 一 一 





放 (E+PJ=E(E-1) +p07) 和 eeeeoreeroms 开刀 


up 
十 放 (K- 1 
0 js 到 


哟 一 1 天 十 2 ,2 了 8 二 3 
(4 .157) 


一 一 
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式 中 ,等 式 右 边 大 括号 中 的 第 二 项 是 为 矫正 有 偏 估计 而 引进 的 。 式 44.157) 在 均 方 
意义 于 是 一 致 收 伍 的 , 即 


lim 忆 人 [Bo 一 在 (天 十 ) 了 [6 一 南下 二 于 | = 0 《4.3158) 
下 面 给 出 了 一 个 仿真 例子 以 比较 算法 (4.154) 和 (4.157) 的 辨识 缆 果 。 
例 4.,3 考虑 如 下 仿真 对 象 
y(R) +0.18y(R 一 1) -0.784y( 开 一 2) 上 +0.656y{( 一 3) = D(k) 
呈 开 ) 二 如 下 十 记 ( 玫 ] 





(4.1S9] 
式 中 ,个 ) 和 ma(R) 分 别 是 均值 为 鹤 . 方 盖 为 1 和 0.25 的 不 相关 将 机 品 声 。 采 用 
算法 (4.154) 和 (4,157) ,得 到 的 参数 估计 值 误差 如 图 #.13 所 示 。 算 法 {4.157) 的 
辨识 结果 显然 优 于 算法 (4.154) 的 辨识 结果 。 


|e-seo1 le- 








惫 法 (4.157) 






算法 (人 4,154) 






0 10100 500 1000 


图 4.13 套数 估计 值 误差 的 收 仇 情况 


4.5.3 随机 牛顿 法 


上 面 所 讨论 的 随机 遂 近 法 实质 上 就 是 活着 准则 函数 的 一 阶 负 梯度 方向 去 搜索 
极 小 点 ,其 作用 与 最 速 下 降 法 基本 一 致 。 式 (4.145) 就 是 这 种 思想 的 数学 表现 , 蕊 
也 可 以 写成 





工 
8 = 04-D -pb 号 全 | | (4.160) 


但 是 , 当 搜 索 点 接近 极 小 值 点 时 ,这 种 算法 的 收 伍 速 度 变 得 很 慢 。 因 此 要 想 获得 比 
较 高 的 辩 识 精度 ,辨识 时 间 将 很 长 。 为 了 加 快 收 和 伍 速 度 , 可 采用 如 下 的 牛顿 法 











32J(6) 1-1T37(E) 1] 
8 -84-D-| 引 B? | 3 让 (- 1 (4.161) 
2 
起 中 246) 表示 准则 函数 (8) 关 于 8 的 二 阶 导数 ,通常 称 之 为 Hessian 矩阵 。 





3 人 = 
显然 ,Hessian 和 矩 阵 是 对 称 阵 ,而 且 在 递 推 计 算 过 程 中 必须 保证 它 的 正定 性 ,以 使 拥 
索 方向 始终 指向 "下山 " 方 向 。 
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一 般 说 来 ,如 果 准 则 函数 是 确定 性 函数 ,那么 牛顿 算法 (4.461) 将 有 较 快 的 收 
伍 速 度 和 较 好 的 辨识 精度 。 但 是 ,这 里 所 用 的 准则 函数 一 般 是 回归 泉 数 ,如 式 
(4.142) 所 示 ,牛顿 算法 基本 上 不 能 适用 ,而 且 Hessian 失 阵 的 表达 式 也 难以 求 得 。 
这 就 导致 了 随机 牛顿 算法 


8(E)] = 81 +p(E)RrIEJ9CB Di (4.162) 


式 中 ,gf18, 玉 ) 的 定义 见 式 (4.143); 有 ( 并 ) 是 Hessian 矩阵 在 和 (一 1) 点 上 的 近似 
形式 ,在 特定 的 准则 郴 数 下 , 它 可 以 再 次 用 随机 逼近 法 来 确定 。 下面 ,利用 随机 牛 
顿 法 来 讨论 模型 (4.120) 的 辨识 问题 ,其 准则 函数 取 式 (4.121》。 根 据 式 (4.143)， 
有 


如 (和 ,DA 一 下 (二 )[ sf) 一 下 TI( 开 ) 和 ] (4.163) 
且 Hessian 矩阵 为 
2 = 吾 { 丰 (下 ) 丰 区 (天 )| 《4.164) 


显然 ,Hessian 矩阵 是 个 回归 函数 ,其 准确 表达 式 难以 确定 。 设 及 人 ) 是 Hessian 矩 
阵 在 二 时 刻 的 估计 值 , 则 有 
五 } 且 (天 FTIR 一 夷 全) = 和 0 (4.165) 
根据 罗 Robbins-Monrc 算法 (4.129) ,可 得 及 (&) 的 随机 逼近 算法 为 
有 (RE) = 且 ( 下 一 下 ) 二 六 到) 下 ( 友 ) 天 区 大) 一 相 ( 天 一 1)] {4.166] 
于 是 ,模型 (44.120) 的 随机 牛顿 算法 SNATstochastic newton algorithm) 归结 为 
人 = 和 (一 1)+o(A) 各 -1()R(R)Ez(A) ~- TCR) 站 (一 1)] 


肛 ( 有 ) 一 民 ( 开 一 1) 十 加 (天 氏 下 (二 ) 天 工 (二 ) 一 机 (下 一 二- 
《4.1671) 


式 中 ,o( 太 ) 为 收 伍 因 子 。 
随机 牛顿 算法 是 一 种 很 有 用 的 算法 。 以 它 为 基础 ,可 以 揭示 许多 辨识 算法 的 
内 在 联系 , 从 而 可 以 导出 递 推 辩 识 算法 的 一 般 结构 。 比 如 ,最 小 二 穆 递 推算 法 


(3.61D) 实 际 上 已 经 包括 在 式 (4.167) 之 中 了 。 当 取 p( 如 = 二 ,及 ( 寻 = 工 P-1() 
时 , 式 (3.61) 可 直接 由 式 (4.167) 导 出 。 
梯度 校正 法 ,包括 随机 盘 近 法 ,主要 特点 是 计算 简单 ,可 用 于 在 线 实时 办 识 。 
4.6 小 ” 结 


梯度 校正 参数 辨识 的 基本 思想 是 ,从 给 定 的 初始 值 850) 开 始 , 沿 着 准则 函数 
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J 几 9) 的 负 樟 度 方向 修正 模型 参数 的 估计 值 B(&) ,直至 准则 函数 J(9) 达 到 最 小 值 。 
在 确定 性 问题 的 梯度 校正 参数 估计 中 , 权 矩 阵 的 选择 是 至 关 重 要 的 。 若 选取 Lya- 
punov 最 佳 权 抢 阵 , 则 参数 估计 值 将 以 最 快 的 速度 收敛 于 真 值 g。 


根据 输入 向 量 请 () 测量 噪声 w(&) 及 被 辩 识 参 数 育 CE) 之 间 是 否 相 关 , 随 机 
性 问题 的 梯度 校正 参数 辨识 问题 被 分 为 三 类 。 状 态 方 改 (+.101) 的 参数 辨识 可 化 
为 第 二 类 岩 机 性 梯度 校正 参数 大 识 问题 ,应 用 定理 4.3 可 得 到 参数 的 渐进 无 偏 估 
计 ， 应 该 注意 的 是 梯度 校正 法 用 于 状态 方程 和 差分 方程 的 参数 辨识 时 ,对 曲 声 特 
性 的 先 验 知 识 要求 很 高 。 

随机 通 近 法 是 利用 变量 ri,zz，…… 及 其 对 应 的 随机 变量 y(zl),y(zz),……, 通 
过 选 代 计 算 ,逐步 逼近 式 {4.128) 的 解 。 常 用 的 夺 代 算法 有 Robpins-Monro 算法 和 
KieferWolfowitz 算法 。 随 机 有 各 近 参数 辨识 是 泊 着 准则 两 数 的 一 阶 负 梯 度 方向 去 
搜索 极 小 点 。 牛 顿 通 近 法 是 沿 着 准则 函数 的 二 阶 负 梯 度 方 向 去 搜索 极 小 点 , 因 兹 
其 收 伍 速度 较 快 。 


习 题 
, 简 述 梯度 校正 参数 辨识 的 基本 原理 。 
,分 析 最 小 二 乘 类 参数 辨识 算法 与 随机 牛顿 法 之 问 的 内 在 联系 。 
, 某国 家 1915 一 1955 年 每 隔 5 年 的 人 口 增长 率 如 表 4.2。 试 用 确定 性 梯度 校正 
参数 辨识 算法 求人 口 增长 模型 。 设 人 口 增长 模型 取 yw(t= 名 +8e+2282, 权 
矩阵 选用 灵 ( 开 ) 二 了 人 (时 。 


0 ko 一 


甫 4,2 


23.3 和 | 324. 的 上 18.9 呈 1.9 明 19.5 骸 


4. 利用 表 4.1 输入 输出 数据 ,根据 确定 性 宰 度 校正 参数 辨识 算法 ,用 MATLAB 软 
件 求 出 该 SISO 系统 的 脉冲 响应 ,要 求 被 辨识 参数 的 个 数 为 5 个 。 
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S.1 引 言 


极 大 似 然 法 是 现代 办 识 的 参数 估计 方法 之 一 。 它 是 由 Fisher 发 展 起 来 的 ,其 
基本 思想 可 追 淹 到 高 斯 (1809 年 )。 这 种 估计 方法 用 于 动态 系统 辨识 ,可 以 获得 让 
好 的 个 计 效 果 。 

除了 相关 分 析 法 的 古典 辨识 方法 之 外 ,前 面 已 经 讨论 过 两 类 现代 辩 识 方法 ,- 
类 是 最 小 二 乘 方法 , 另 一 类 是 梯度 校正 法 。 它 们 不 仅 计算 简单 ,而且 参数 估计 量具 
有 许多 优良 的 统计 性 质 , 对 噪声 特性 的 先 验 知识 要 求 也 不 商 。 本 章 主要 讨论 极 大 
公然 辨识 方法 ,这 类 拆 识 方法 的 基本 思想 与 前 两 类 方法 完全 至 同 。 对 于 极 大 亿 然 
法 来 说 ,需要 构造 一 个 以 测量 数据 和 未 知 参数 有 关 的 似 然 函数 ,并 通过 极 大 化 这 个 
函数 获得 模型 的 参数 辨识 。 据 此 , 极 大 似 然 法 通常 要 求 具 有 能 够 写 出 输出 量 的 条 
件 概 率 密度 本 数 的 先 验 知识 ,因而 ,计算 工作 量 较 大 。 但 是 , 极 大 似 然 参数 佑 计 方 
法 可 以 对 具有 有 色 噪 声 的 系统 模型 进行 辨识 ,在 动态 系统 辩 识 中 有 着 广泛 的 应 用 。 
它 和 最 小 二 乘法 以 及 预报 误差 方法 耸 在 着 一 定 的 联系 。 本 章 首 先 介 绍 极 大 似 然 参 
数 辨识 康 理 ;其 次 讨论 动态 系统 模型 参数 的 极 大 似 然 佑 计 , 其 中 包括 系统 动态 模型 
及 噪声 模型 的 分 类 与 特点 、 极 大 似 然 估计 与 最 小 二 乘 估计 的 关系 , 协 方差 阵 末 知 时 
的 极 大 似 然 参 数 估计 ;最 后 ,讨论 递 推 的 极 大 似 然 参 数 估 计 , 其 中 包括 极 大 似 伏 递 
推算 法 的 原理 及 方法 .对 开发 的 亿 然 递 推 法 辨识 MATLAB 仿真 程序 进行 了 剖析 。 


5.2 极 大 似 然 参 数 辩 识 原理 


设 * 是 一 个 随机 变量 ,在 参数 8 条 件 下 z 的 概率 密度 本 数 为 加 (*|10),z 的 工 
个 观测 值 构 成 一 个 随机 序列 | zx 人)}。 如 果 把 这 工 个 观测 值 记 作 z = [z(1)， 
xf2)，…z( 工 )]], 则 zx 的 联合 概率 密度 为 交 z19) ,那么 日 的 极 大 似 然 估 计 就 是 
使 户 ( zr | 旭 )| 放 0 二 max 的 参数 情 计 值 , 即 有 
[2 | 2 

8 


二 由 {S,1) 


和 


中 EL 


am 六 (zi | 8)1TI 
| 也 = 【5.2) 





本 


日 kfL. 


-= 一 - = 一 - -一 一 - - 才 一 or em 一 一 ee 
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上 式 表示 对 联合 概率 密度 交 zr19) 取 自然 对 数 ,然后 对 参数 9 求 导 。 显 然 ,对 一 
组 确定 的 数据 = ,(zr 19) 只 是 参数 9 的 函数 ,已 不 再 是 概率 密度 函数 了 。 这 时 
的 六 (zf 8) 称 作 8 的 函数 ,有 时 记 作 (zxzr 10)。 可 见 ,概率 密 庶 函数 和 似 然 画 数 
物理 含义 不 同 ,但 它们 的 数学 表达 式 相同 , 即 荆 (zzy6)= 六 了 19)。 央 此 极 大 似 然 
原理 又 可 表述 成 


了 T | 他) 工 加 
[一 入 一 二 小 {S.31) 
或 
引 nL(zi | 日) 
[| 6 


6 ML 
式 中 ,jnL (xz 仿 称 作对 数 介 然 函数 ;5 称 作 极 大 亿 然 参数 估计 值 , 它 使 得 似 然 函 
数 或 对 数 似 然 函 数 达 到 最 大 值 。 式 15.3) 或 (5.4) 就 是 极 大 伏 然 蓝 数 原理 的 数学 表 


示 。 它 们 的 物理 意义 是 :对 一 组 确定 的 随机 序列 zi ,设法 找到 参数 估计 值 fa ,使 


得 随机 变量 * 在 人 ai 条件 下 的 概率 密度 函数 最 大 可 能 地 通 近 随机 变量 zx 在 6( 真 
值 ) 条 件 于 的 概率 密度 函数 , 即 应 有 
5 Ba) 一 > 1b) (5S.3) 


上 式 会 义 是 指 当 af(z12)? 取 重大 值 时 ,对 应 的 估 值 六 am 才 和 真 值 % 误差 最 小 , 因 
此 , 它 反映 了 圾 大 似 然 原来 的 本 质 ,但 是 数学 上 不 好 实现 。 可 以 证 明 式 (5.3) 或 
(S.4) 是 实现 式 (5.5) 的 数学 形式 ,下 面 论述 这 一 事实 。 
设 z{1),z(2),……，z(LL) 是 一 组 在 独立 观测 条 件 下 获得 的 随机 序列 ,或 者 说 是 
母 集 的 一 组 互相 独立 的 样本 ,那么 随机 变量 = 在 参数 8 条 件 下 的 亿 然 末 数 为 
了 (EL 二 四 (zf 1 人 六 (Cs(2) 8) 太 (z( 开 ) | 号 ) 


= [ 户 [ 本 下) | 有) 【S.6) 
对 应 的 对 数 但 然 函数 为 
Ka 1 的 -La 10) = na(z( 有 1 人 (5.7) 
平均 对 数 似 然 丽 数 为 


工 一 5 





匡 
PCz 10) = 于 症 mp(z(619) Ejinats10) (5.9) 


同 理 ,随机 变量 x 在 参数 包 条 件 下 的 平均 对 数 似 然 函 数 为 
Fa 1b) 工 二 二 Enptz16oi (5.9] 
窟 党 
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下 的 :的 你 尼 Inp(z160) 1 一 下 Inp(z10)1= 下 | 2 | 《5 ,1 


太 ( xz 昌 ) | 
T(8,5) 称 为 Kullback-Leibler 信息 测度 ， 若 令 
(这 上 用) 
xz oz) {15S.11) 
则 =>0, 并 利用 不 等 式 nz 所 z 一 1 于 是 有 
记 (z | 疡 (2z | 了) 
| 所 : 一 
bb(z1b) pz12) 
因 站 xz| 砚 )>0, 上 述 不 等 式 两 边 同 乘 以 放 fxz| 0), 再 对 = 积分 , 刚 有 


1 【$.12 ) 





e 声 (z 有) 
| 2 《> 6o)m rz 四 
< | (z|9)dz -| pe (z|00)dz (5.13) 
考虑 到 全 概率 为 ], 上 式 写 成 
六 《2 | 日) | 
mn 一 一 一 一 | 二 . 
Le 1 克 ) 如 (3.14) 
综合 考虑 式 (45.10) 和 (5S.14) .有 
开 扣 0) 0 {S.13) 


式 (5.5) 要 求 并 z|9) 取 极 大 值 ,这 就 意 睐 着 Tb ,0) 必 须 取 极 小 值 。 根 据 所 6 ， 
9) 的 定义 ,并 考虑 到 对 一 个 给 定 的 随机 变量 = ,其 概率 密度 函数 户 (zl 160) 是 确定 
的 ,显然 ,从 式 (5.10) 可 知 , 极 小 化 工 2 ,的 等 价 于 极 大 化 五 np(z18)j ,由 于 
瑟 {lnpfz|l 的 与 了 (2z18) 之 间 存 在 单调 的 天 数 关系 ,所 以 极 大 化 工 (zz |5) 或 
InL (zz 的 与 极 大 化 五 jnzp(zlg)i 是 等 效 的 。 因 此 式 (5.3) 或 (45. 忆 体 现 了 极 大 似 
然 原理 的 内 在 实质 ,它们 是 极 大 似 然 辩 识 的 重要 依据 。 

例 5.1 考虑 一 个 独立 同 分 布 的 随机 过 程 |z(z)|l ,在 参数 六 条件 下 随机 变量 
z 的 概率 密度 为 ztzl12)= 凡 re 生 , 昌 0 试用 解析 法 求 参 数 8 的 极 大 似 然 估计 。 

解 设 好 =[zll)zf2)…z( 工 ) 工 表示 随机 变量 z 的 工 个 观测 值 的 向 
量 , 那 么 随机 变量 z 在 参数 0 条 件 下 的 似 然 画 数 为 


LIxr19) = 县 记 (s( 下 ) 1 8) 
-pz 开 z(R&)exp| -日 > 和 (上 )] (S.16》 


对 应 的 对 数 似 热 函 效 为 
上 上 
er 1 的 =lnLxzr13) =2LIng+ >》，tnzr( 下 ) ~ 8>， z(R) (5.17) 
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根据 式 43.4), 则 有 


[| -2 - 六，I() 一 (5.18]) 
品目 站 k=1 
?LL MTL 
从 而 可 得 
pw = 2L/ 2 z() (5.19) 
有 允 由 于 
人 也 
et 2 -=--2<o0 (5.20) 
口 召 日 ML 于 2 
MtL 





所 以 Ba 使 似 然 函数 达到 了 最 大 值 。 因 此 6 wm 是 参数 6 的 极 大 亿 然 估计 值 。 


5.3 ”动态 系统 模型 参数 的 极 大 似 然 估计 
5.3.1 动态 模型 描述 
1. 动态 系统 模型 


动态 模型 示意 图 如 图 5.1 所 示 。 设 :4A(z  )=CIOz  )a(R) = e()7 
Ctz 一 ), 则 有 


《5.21) 


人 一 站 fw 1R( 十 区 下 》 
efR) 一 门 (e 巧 吕 ( 才 ) 





图 S$.1 动态 模型 示意 图 


式 中 ,oa( 有 是 均值 为 零 .方差 为 cz、 服从 正 态 分 布 的 不 相关 随机 噪声 ; x (&) 和 
<(&]) 表 示 系 统 的 输入 输出 变量 ; 且 
册 (z 虽 二 二 十 @1v 1 十 人 3 
je 一 站 z 1 十 玫 R 十 十 而 光 《3S.221 
了 Dfz =1+az +eoz + 十 二 
同时 , 设 系 统 稳定 , 即 4(z -0) 和 (z 0) 的 所 有 零点 都 位 于 = 平面 的 单位 圆 内 ， 
且 A(z -Bfz 和 (zx 门 没有 公共 因子 ,这 意味 过 程 是 渐进 稳定 的 。 
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2. 嗓 声 模型 及 其 分 类 


根据 第 二 章 提 到 的 表示 定理 ,在 一 定 条 件 下 ,图 5.1 中 的 有 色 品 声 e( 丰 ) 可 以 


-一 一 站 电 自 噪声 v(5) 驱 动 的 线性 环节 的 输出 来 表示 。 
该 线性 环节 叫做 成 形 泪 器 ,如 图 5.2 所 示 。 
从 图 5.2 可 直接 写 出 噪声 模型 的 脉冲 传递 函 


数 , 即 
五 (= -1 = 


s.2 成 形 滤 臣 器 


厂 (z 政 ) 
Cr 
vt 点 ) 是 自 噪 声 , 品 声 模 型 式 (5.23) 直 接 块 定 e(8) 的 噪声 特点 。 在 上 式 中 ,如 果 
Ctz- 1 或 六 (z 简化 为 1, 则 噪声 模型 的 结构 和 特性 也 随 之 改变 。 根 据 其 结构 ， 
了 噪声 模型 可 分 为 以 下 三 种 类 型 ， 

(1) 自 回归 模型 ,简称 AR 模型 ,其 模型 结构 为 





{S.231 


Cfz lefk) = mm(RD) 《5.24) 
(2) 平均 请 动 模型 ,简称 MA 模型 , 其 模型 结构 为 
efR) = 站 (z 1)op(R) (5.2S) 
(3) 自 回归 平均 滑动 模型 ,简称 ARMA 模型 ,其 模型 结构 为 
Cl)efE) 一 万 (sz TD) 《S.261) 


s.3.2 极 大 但 然 估计 与 最 小 二 和 狠 佑 计 的 关系 
将 模型 式 (5.21) 写 成 
zj = 再 和 6 (3.27】 
式 中 
xl 一 [zfE),zf2)， <( 工 )] 
el = [e(1)ef2)，……e( 工 )] 


_ 工 
如 一 Lal ya2，… en ,下 1 2] 


一 去 10) 一 于 (0D》 0 
如 < 1 … 2 “人 本 的 
一 2 一 人 
{5.28) 
因为 
下 [并 一 苹 ( 开 上 全 本 (是 一 井 二 十 要 人 (下 一 天 ) (5.29) 


则 有 
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上 下 1e(EDe 人 一 了 | = > cdzct -va 








， (5.30) 
LauAl， 下 =00<0 或 > nm) 
噪声 e(&) 的 协 方差 阵 记 作 
五 1eflyefl) 五 jefl)eg2)  。 eglLyeC ED 
Eee 三 2 和 ee 
下 ee 开 efEL)el2)  … fe( 工 )efL) 
(5.31) 
由 于 噪声 (ke) 服 从 正 态 分 布 ,系统 的 输出 测量 >， 也 服从 正 态 分 布 , 即 
zj 一 (再 和, 三) (3 ,321 
根据 统计 , 正 态 分 布 的 随机 变 基 >* 的 概率 密度 表达 式 为 
四 [ 四 《并 一 工 儿 
pz) = 志 -ee| 到 (5.33) 


式 中 ,为 正 态 分 布 函数 中 心 值 ; c* 为 尺度 因子 。 则 在 参数 8 条 件 下 , zr 的 概率 
密度 函数 可 以 写成 


(ar16) = (2m)- 瑟 (de 也) -zexp| -到 ( 工 一 于 9)TEI(zz 也 9 


2 
(5.34) 
据 此 ,对 数 亿 然 数 可 以 写成 
zl |8)= mitzrlgel = jnpfzr|B) 
了 2r- 冯 oda 吕 -本 ( 增 天 9)7E5I(zz 一 天 9) 05.35) 
根据 极 大 似 然 原理 ,将 式 (5.35) 对 是 求 漳 并 令 其 等 于 零 ,可 得 
胡 m =【 瑟 了 7 再; ) 1: 互 本 -5 {S.36]) 
易 验 证 对 数位 然 函 数 的 二 阶 导数 小 于 零 , 即 
(zz (5.37) 
了 和 2 会 ML 


可 昔 , 式 (5.36) 的 全 mm 使 对 数 似 然 琢 数 ix 18) 取 最 大 值 。 所 以 bm 是 6 的 极 大 
似 然 儒 计 。 如 果 噪 声 e( 妨 的 协 方 差 窍 阵 互 已 知 , 令 下 =c2, 工 为 单位 矩阵 ,ef 
是 均值 为 零 .方差 为 史 的 不 相关 的 随机 噪声 ,那么 由 式 (5.36) 可 直接 写成 

Ba = (HT (5.38) 
这 时 参数 8 的 极 大 亿 然 估计 等 价 于 最 小 二 乘 估计 ,但 是 前 提 是 数据 长 度 工 应 充分 
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大 。 理 则 ,噪声 方差 会 使 辩 识 的 精度 受到 影响 ， 这 一 点 可 以 由 比较 极 大 似 然 和 最 
小 二 乘 两 种 方法 的 噪声 方差 估计 c: 加 以 证 明 。 
s.3.3 协 方 差 阵 未 知 时 的 极 大 怕 然 参数 估计 


在 式 ($.21) 所 表达 的 动态 系统 中 ,um 人 (8) 是 服从 正 态 分 布 的 自 噪声 ; e(&) 是 
中 天) 天 一 一天) 的 线性 组 合 , 是 有 色 了 噪声 , 且 e( 关 ) 的 协 方差 阵 也 
未 知 。 令 
和 = [alias (S.39) 
在 独立 观测 的 前 提 下 , 当 获 得 工 组 输入 输出 数据 |]z(k)l 和 |z()1 后 ,在 给 定 的 
参数 8 和 输 人 的 eaeta ma 一 1 条 件 下 ,=(1) ,sr(2)，s( 工 ) 的 联合 概 
率 密度 晒 数 可 写成 
户 (zf1) ,zf2)，2(ELJE 人 zf2) ee 二 18) 
三 户 (2fL) Rs) 一 1 at 一 1) 和) 
X 疡 (zf 一 1 zf)yzf2) zf( 工 一 2 af2) ma 一 1) 站 ) 
汉 … 交 {zt1)| zf07 ,atD) ,和 )} 


= 了 az( 昌 |z(D,z(2) 和 yz( 一 Disx(D5 eu 有 一 1D,9) (5.40) 
根据 烧 型 ($.21) ,有 
一 一 > 如 (下 一 了 ) 十 > 百 呈 (下 一直) 十 [ 二 )》 十 > 嫂 一 了 


(5 .41》 


将 式 15.41) 代 大 到 式 (5.40) ,可 得 
靖 (zf1) zf2)pz(L)aeglyaef2》 (EL 一 1 0) 


声 { | (天 ) -- oz 人 i -让 + 六 5 一 站) ao(h - 旨 | 


z(1),z(2)，,z(E 一 Txtl)a(2)，a( 有 一 1 (5.42) 
当 观 测 到 点 时 刻 ,( 开 一 和 时刻 以 前 的 zaf)a( 都 已 确定 , 旦 mm 人 与 
(并 一 1 时 刻 以 前 的 z( xf ,0 不 相关 ,因此 ,上 式 可 写成 
访 (zft1)yzf2]，pyzfLD)| af,af2)，ze( 工 一 1) ,0) 
世 开 _ 工 1 志 
-| 韦 人 (RD 让 十 EC 十 (Cn 这 (o) 芝 ep| -二 之 co 人 | ($.43) 
式 中 ,ec 为 可 由 人 一 1 时刻 以 前 的 确定 量 求 出 的 常数 。 如 果 将 ar 和 丘 -1 写成 
必 一 [zf1l),z(2) wz( 工 )] 


3.44 
有 一 人) 一 1 开 《 
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那么 观测 值 zz 在 8 和 引 -1 条 件 下 的 对 数 似 然 画 数 为 
站 | BT _ 1， 自 ] 二 Tn7 (zy | 下 .1 和] 一 JIn 记 (2 | Er -1 和 ) 


志 工 
一 性 一 了 了 Iner 一 了 

式 中 ,人 () 汪 足 下 列 关 系 
oz( 有 + az( 有 下 


了 
一 202 人 人) [5.45) 
立业 一 1 


-or( 昌 - > ao(R 3) 《5.46) 
主 = 二 一 上 


根据 极 天 似 然 原理 , 嗓 声 方差 唉 的 极 天 似 然 估 计 z2 使 得 民 z | 四- 8)| := 


max, 即 有 
afzr| 三 -1,6) 








3 哆 2: = 0 【5.47) 
解 得 
-~ L 世 
52 一 了 2。 2 (5.481) 
1 
把 上 式 代 入 式 (5.45) , 则 
ifzl | or -18) =c 一 了 之 v2(E) 一 
工 1 工 世 2 
cm 【5S.491) 


式 中 ,cl = ce - 工 /2。 从 极 大 似 然 原理 知 ,参数 9 的 极 大 似 然 估计 8 必须 使 得 
上 开 | 相 -18)| =max, 这 等 价 于 使 得 


工 | 
VB ) 一 开 立 2 下 全 = mmin 《5.50) 


式 中 ,ofR) 满 足 式 (5.46) 的 约束 条 件 。 
综 上 所 述 , 当 噪 声 e(&) 的 协 方差 阵 瑟 未 知 时 ,模型 式 65.21) 的 极 天 似 然 居 计 
为 :在 式 (5.46) 的 锡 东 条件 下 , 求 参数 8 的 极 大 似 然 估计 ba 必须 使 得 Y(Ba ) = 
min。 同 时 ,噪声 方差 ec: 的 居 计 值 等 于 
叶 = minVfo) = VBha) [5.5S1) 
显然 , V(6) 是 参数 a; ,下 和 十 的 函数 , 它 关于 ai 是 线性 的 ,而 关于 d 却 是 非 
线性 的 。 因 此 Y(6) 的 极 小 化 问题 不 好 求解 ,只 能 用 选 代 的 方法 求解 。 下 面 介绍 


人 mr- 
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两 种 求 46) 极 小 值 的 最 优化 选 代 算法 。 
1 .Lagrangian 来 子 法 


Lagrangian 乘 子 法 是 相 良 节 夫 等 于 20 世纪 80 年 代 初 提出 来 的 一 种 基于 极 大 
似 然 思路 的 迁 代 算法 。 为 了 使 对 数 似 然 函 数 式 (5.45) 达 到 最 大 , 选 目标 喇 数 为 


V(8) = 二 > tc( 开 ) (5.52) 
求 惠 标 函 数 的 极 小 化 ,约束 条 件 为 
(下 ) 十 > am( 下 一 让 一 ( 开 ) 一 > C 这 《天 一 卫 ) 十 >， BR 人 (二 一 说 = 作 
四 《5S.53) 


引 人 Lagrangian 鞭子 4 二 ) ,正二 严 十 1, 下 十 了 十 了 , 构 半 如 下 的 Lagrangian 函 
数 


3(6) = 革 六 oz( 朋 -二 阅 MA) [a( 人 + 2 du 一 


二 > 5 人 站 (有 -az 人 有- 


= 站,A ai (5.54]】 
把 对 目标 函数 v(6) 的 极 小 化 问题 转化 成 对 Lagrangian 函数 Sb8) 的 极 小 化 问题 。 
即 变 成 了 Lagrangian 函数 S(6) 分 别 对 14.8(8= [ab 起 ]) 求 极 小 值 的 问 
题 。 





(1) 首先 取 
33(6) ) 1 。 
je = 开 二 站 + 邢 [COD+AO+] -0 (5.55) 
了 一 开 二 19 十 2 并 十 工 
并 令 
=0， 了 三 工 +1 工 二 2 二 十 罚 (S.5S6) 
组 成 下 列 方 竹 组 


AT 3 十 说 十 2 人) 三 0 一 开 二 直下 十 2 了 
| 人 十 让 十 了 局 于 三 开 天 537 


hf 站 =0， = 工 +1, 工 十 2 了 十 严 
(2) 其 次 ,Lagrangian 函数 S(8) 对 4) 求 导 ,并 令 之 为 零 , 可 得 


纪 [) 一 一 y， 过 站 ( 玫 一 让 十 下 下) 十 > Qiz( 开 一 卫 ) 一 > 六 2 一 了 
(和 .5S8) 
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(3) 由 式 45.58) 和 (5.57) 可 求 得 y(E) 和 4 人), 求 参数 估计 Ban 值 必须 使 
Lagrangiain 图 数 呈 (8) 取 极 小 值 。 由 于 AR) 和 放 开 ) 与 有 有 关 , 对 和 不 能 以 线 恬 的 
形式 进行 估计 , 因 亚 必须 对 





1aS(6) 
和 = 天) 和 ( 丰 一 了 】 
9940 _ 工 Y _ 
25 | 现 汉 A(E)a( 开 一 门 [5 59) 
aq(9) | 1 < 
7 ee 六 2 A(A) 3 一 用 
间 2 


进行 搜索 , 方 可 求 得 合 m , 鸽 和 = min。 搜 索 方 法 可 采用 DFP(Davidon， 
Fletches,Powel 变 斥 度 法 ,具体 的 搜索 过 程 为 

个 给 定 初始 状态 夺 生 和 循环 次 数 M 等 赋 初 值 ,对 za 阶 系 统 , 和 并 是 32x1 维 
年 阵 ,初始 值 可 给 随机 小 数 阵 ;下 司 = 3 奸 二 =0。 

全 根据 在 好 和 立 (E) 的 初 值 志 (17,(2) ma2) ,由 起 (5.58) 计 算 立 (RE) ， 
下 一 天 十 1 天 十 网 


全 根据 所 求 的 避 (RE) ,由 式 (5.57) 计 算 六 () ,天 = 站 +12+2 
虽 出 式 (S.591Lagrangian 图 数 叶 6) 关 于 和 的 梯度 , 记 作 


如 a319) 工 
8 人 | 写生 | (5.60) 


式 中 ,8 为 32X1 维 矩阵 ;8 人 志 中 含有 样本 [ 一 >( 开 一 1 一 =( 开 一 2)，z( 一 1， 
4 一 2)] 和 噪声 估 值 沁 (7) 的 信息 。 

癌 ) 令 下 一 一 于 ( 芝 人 

图 构造 本 数 由 7202 一人 证 + Dat)》 用 一 维 搜索 法 求 &'?” 使 得 

霄 (站 = min 

他 他 声 他 一 看 人 中 二 天 (全 夯 f) 

时 重复 第 四 .@@ .四 步 ,根据 前 这 0) ,计算 8G+D ,并 置 Ag 全 一旦 人 下 全) 

二 利用 DFP 公式 求 再 全 

(py (MT (AASTET 
可 PP 再 ABC AS 六 本 

一 (ptDJTAgG AgCD)TECOAgO 
蝎 如 果 | gf 私 s 或 上 (2 和 委 se 为 指定 的 正 小 数 , 则 意味 着 已 据 索 到 参 


(5.61) 





-一 -一 ， -mn 
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数 6 的 援 大 公然 估计 量 帮 ,停止 计算 ;否则 取 土 次 计算 中 最 后 ”个 () 值 作为 


下 一 次 式 (15.587 计 算 忆 人) 的 初始 值 ,并 署 ;= +1, 返 回 第 四 步 , 依 此 循环 先 代 ， 
直至 收敛 或 循环 次 数 等 于 M 中 所 赋 的 值 为 止 。 
DFP 变 尽 度 法 的 程序 流程 图 如 图 $.3 所 示 。 


初 娩 化 : 村 站 屿 冉 值 ; BF FF 


根据 式 {5.58) 计 算 到 白 


根据 式 (5.57 计 算 让 提 











根据 步 昭 生 二 计算 姑 " 并 求 Po 


根据 步 票 亿 求 jl 


根据 步 可 四 求 就 0= 癌 +AGBp 













leels<e? Y 
或 wpol<es 
忆 
< > 保留 


N 


根据 步 台 加、 团 计算 控 出 衣 人 1 
0 A 和 有 ” 停止 二 算 
出 5.3 DEFP 变 尺 度 法 的 程序 流程 图 


2. Newrton-Raphson 法 
现 仍 以 式 ($,52) 和 (5.53)} 分 别 为 目标 函数 和 约束 条 件 , 根 据 Newten-Raphson 


原理 讨论 对 约束 条 件 式 (5.53) 的 极 小 化 问题 。 设 和 是 利用 第 六 批 以 前 的 输入 输 
出 数据 |z (EliseER=(N-DL+l(N-LDL+2…NL) 求 得 的 极 大 似 
然 估 计 值 , 它 使 得 


J(9= Vv(9) = 二 So = min (5.62) 


一 fr 一 1 开 31 
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当 又 获得 一 批 新 的 输 人 输出 数据 | (二 让 jz) 一 (INLT+TTNLT+2， 


(+1) 工 )) ,使 得 


+1)1L 


Jura(g)= 开 ， z() 
下 = .+1 


达到 极 小 值 。 
根据 Newtorn_Raphscn 原理 ,全 ,与 轴 满足 下 列 递 推 基 系 








。 BJNva1(B@)71- 
房 .1 一 自 \ 一 乳 - 和 机 | 3 -| 
盯 由 
式 中 ,有 为 Hessian 矩阵 , 定 习 为 
9 JrikB) 
一 = 3 


如 果 将 式 45.63) 写 成 递 推 形式 
Ji(B ED)= Justi(8 TD+ o2(A) 














则 可 求 得 
Je,RE) aasBE 一 1 av() 
一 一 一 一 一 一 + 人) 一 
器 人 口 闻 口 笑 
Je 一 2) CN (站 日 共 ( 丰 ) 
四 8 0 398 
(NT 二 工 
上 = +1 
及 
Jet(8，R)》 BJCD 一 切 
了 本: 加 了 8 
8of 二 )] [Bo 到) 32 中] 
36 36 je 382 
人 9 了 


乱 略 一 阶 导数 项 n(&) 一 2-, 则 有 


了.Jvhi(CB， 由 6 一 有 _ | 玫 作 。 


工 2 | 
避 和 4 | 36 了 儿 


呆 愉 











因此 





1 


2 人] IE 区 
二 于 一 一) 1 
3ag 上 肝 ,0 350 ; 








(5.63) 


【5.64) 


(S.65) 


【5.66) 


(5.67) 


(5.68) 


(5 ,60) 


(5.70) 
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将 上 式 代 人 到 式 45.64) ,可 得 到 Newton-Raphson 法 获得 全 ,1 的 递 推 法 。 上 式 中 




















可 玫 
的 -2 | ， 展 开 司 写成 分 别 对 参数 w ,5 ,c 求 一 阶 导 数 的 形式 , 即 
日 、， 
口 T[ 天 口中 六 一 
人 
局 T[( 开 ) zi 号 一 1 一 了 
4 56 8 让- 咏 2 3a5 | 记 (5.71) 
如 一 
3 =- 六 - 补 本 于 才 |， 











二 = NT 十 开 十 下 十 二 二 2 
下 面 给 出 Newton-Raphson 法 程序 适 代 具 体 步 又 ; 
中 先 采集 一 批 输 人 输出 数据 jz fl jz 人, 利用 最 小 二 尼 法 获得 参数 的 志 


步 估 值 , 作 为 极 大 似 然 参 数 估计 的 初始 状态 , 记 作 和 ,对 于 a 阶 系统 , 人 为 3nx1 
维 矩 阵 ; 给 循环 次 数 M .允许 选 代 误 莽 e 等 赋值 ;N =0。 
四 再 采集 一 批 长 度 为 工 的 输 人 输出 数据 12 (并 )、|z() 扩 天 二 1 2 工 )， 


同时 设 定 初 始 值 zf(1) ,如 (2)，… ,二 (7 ) 和 2 (12，)。 


地 根据 式 (5.58) ,利用 Bs 和 C 和 生计 有 的 5 = NEL+2a+1， 
入 世 十 天 二 2 +1) 工 )。 





GD 初 值 ， 计算 新 的 - 和 ，。 


加 利用 所 计算 的 新 的 (4 ) 和 2 和 
4 1) ) 根据 式 (5_70) 计算 /，(g) 关 于 芝 数 的 样 度 和 Hessin 短 了 S$。 

@@ 根据 式 (5.64), 递 推 计算 友 v，i。 

OD 取 最 后 ， 个 去 (人 和 -2 ; 值 , 作 为 下 一 次 近代 的 初 值 ;IN = N+ 1。 





(三 EL 十 1# 二 1 NELT+T+2eAV 
8v 





一 办] 短 s 成 立 , 若 是 ,保留 人 vi， 





oemeaa|s| < 
停止 遂 代 ; 震 否 ,继续 僵 。 


时 检测 六 = M 是 否 成 立 。 若 是 ,保留 全 fi , 停 正 进 代 ; 若 理 , 转 到 全 继续 循 
环 。 
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S$.4 递 推 的 极 大 似 然 参数 估计 
s.4.1 极 大 似 然 递 推荐 读 的 原理 及 方法 


实际 上 ,Newton-Raphson 法 是 一 种 可 以 用 于 在 线 辩 识 递 推 算法 。 但 这 种 方法 
每 次 需要 采集 一 指 长 度 为 工 的 系统 输 人 输出 观测 数据 , 即 每 批 数 兢 需要 工 次 的 观 
测 ,然后 根据 工 次 观测 数据 进行 一 次 伸 推 。 本 节 将 讨论 一 种 每 观测 一 次 数据 就 递 
推 计算 一 次 参数 估计 值 算 法 。 本 质 上 说 , 它 只 是 一 种 近似 的 极 大 似 然 法 。 

考虑 如 下 模型 

次 (1) 训 ( 玫 ) 二 是 (2 让 (和 十 五 (z 本 ( 开 ) (5.72) 

式 中 ,2 人) 和 =(R) 是 系统 的 输入 .输出 量 ; |v( 天 )} 是 均值 为 零 . 方 善 为 zz 的 不 相 
天 随机 蝇 声 序列 。 旦 


点 (zl1) 一 工 + @1 之 1 十 口交 十 … 十 卫生 














B(z 一 有 zz 二 【5.73) 
万 (z 0 = 一 +az 十 xz 十 … 十 dz 
令 
8 = [etaz，wyan ,652Basadiyaa do (5.74) 
则 模型 式 45.72)? 的 参数 极 大 似 然 问题 就 是 求 参 数 0 ,使 得 
19| = 了 > )| ;= min (5.75) 
式 中 ,br 为 参数 8 的 极 大 似 然 估 计 值 ;oz(E) 满 足下 列 关 系 
af&) = [DCz [AKCz DR 一旦 (zc 7)au()] 【5.76) 
如 果 xf 丰 ) 在 芭 w 点 上 进行 素 勒 展开 , 则 可 近似 表示 成 
oOD (人 | + 2 人 | 《8 - he 《5.77) 
并 设 
jir( 有 全 -| 2 人] 2 
| 
aal 3a。， ”3851 96。 ”3d 3d。 了] | 
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式 中 
让 和 = [ 疡 (= )] -1 全 ( 久 会 er 人 
1 8 =[P( 和 (人 会 -= 6 





式 中 ,zr(R) Jar) 和 ar 分 别 表示 =() ae) 和 Ye) 的 滤波 值 ,满足 下 列 关 


zj 并 ) = [让 (上 ] 1z() 
xf( 开 ) 一 [ 态 (z 1 12 下) (了 .80 ) 
5 有 ) = [ 访 (z-D]-1 5 有 


或 写成 
zff 开 )》 一 2(R)》 一 避 1zr( 雪 一 1) 一 一 让 zr( 下 一 9 
pr( 是 ] 关 下 () 一 达 1aff( 下 一 1 一 全 一 可 2A( 下 一 了 (5.81) 
[2() = 了 有 一 区 一 0) 
那么 向 量 天 (有 ) 记 作 
丰 ( 开 ) 一 [一 直 (用 一 了 和 一 (和 一 加 ar( 人 一 1 
fr( 开 一 珊 ) Dr( 瑟 一 1) VE 一 2d)] 1S.82) 
为 了 得 到 极 大 亿 然 估计 的 递 推 形式 , 先 将 所 的 写成 递 推 的 形式 
JK8, 有 0) 一 J08 人 -了 十 广 友 (人 (5.83) 


设计 (一 引 是 模型 式 (4.72) 在 上 一 1 时 刻 的 椰 大 似 然 估 计 值 。 若 将 TB, 一 


1 在 填 必 -~ 1) 点 上 进行 泰勒 级 数 展开 ,并 将 在 该 点 上 J(8 光 一 蕊 对 的 一 阶 导 数 
忽略 , 则 有 


了 (8, 克 ) < 了 [9 一 站 (一 1)]TP-LRE 一 1T[B 一 站 ( -1] 


+ 了 人 (有 + (5.84) 
式 中 ,区 有 是 J(8. 一 中 进行 泰勒 级 数 展 开 时 的 残 差 项 ;同时 
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“ 一 
PT 人 一 有 4 | (3.85) 
9 有 8 -1 
是 正定 对 称 阵 , 令 
7 (98) 一 2700,) (5.86) 


并 注意 到 式 (5.77) 和 (5.78) , 则 
了 (和 ,天 ) [和 一 站 (二 一 1)]TP-1( 有 一 1)[8 一 全 (一 1)] + 二 一 于 


ri 天] 
十 皮 1 下 
1 信人 一 1 已 和 | 站 人 -有 


= [和 一 站 (下 一 1)]T[P IC 一 1) 十 起 玫 ) 下 上 天 ) ] [全 一 在 ( 开 一 1)] 








疯 了 
[8 一 站 (天 -Dj| 





-2e(D|， HAFCDLe -GD]+ 0， + 3 
(5.87) 
为 了 将 式 (5.87) 配 成 二 次 型 , 设 8(E -1)=8-( 作 -1), 则 有 
J (8 并) = [6 一 1) -Fr(EJ]JTP-I(R)[ 人 (有 一 1) 一 (RD)] 十 了 (天 ) 








(3S.88) 
式 中 
且 - 人 ( 开 ) 关 四 (二 一 下 ) 十 真 六 二) 不下 到) 
Fr ) 二 而 (下 ) 直 的 大》 让 (天 让 半生 大 (二 ) 产 ( 才 ) (5.89) 
了 7“《 虹 )》 一 站 IT( 开 ) 瑟 -1( 天 )P[ 下 ) 十 忆 ( 开 ) 人) 
显然 ,六 (人 ) 大 于 零 , 故 由 式 {5.88) 可 知 , 若 & 时 刻 的 参数 估计 值 帮 ( 二 ) 使 得 
和 (一 D| = Fr(R)》 一 其 (到 ) 站 (天 ) (5.90) 
则 三” 8, 天) 可 得 最 小 值 。 利 用 和 矩阵 反 演 公式 
(和 TBC) 1 一 昌 - 工 - 和 -1 有 (+ CI) CC (S.91 ) 
则 从 式 (5.89) 第 一 式 可 推导 出 
PC 有- 已 (到 一 1) 丰 六 天) 下 六 到 )P( 二 一 1) 0 .02) 


1 十 站 大 天 ) 了 (下 一 上 天 FAR) 
另外 ,类 伺 于 最 小 二 乘 法 的 推导 ,可 获得 增益 第 阵 的 递 推 公 式 为 
捧 (R) = 瑟 ( 开 一 1) 呈 (天 ) [二 十 下 大 十 ) 惠 (用 一 工 ) 真 r 下 )] 一: (5.93) 
于 是 , 递 准 的 极 大 似 然 参 数 估计 (RML) 算 法 描述 为 式 45.94)。 
式 (5.94) 表 明 , 极 大 似 热 参 数 估计 递 推算 法 类 似 于 增 广 最 小 二 和 滋 法 ,所 不 同 的 
只 是 向 量 包 ( 虽 ) 的 构造 不 一 样 , 极 大 似 然 参数 估计 递 推算 法 的 程序 框图 如 图 5.4 
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所 未 。 

半 (E) = 唐 ( 开 一 1) + 下 (请 ) 误 ( 天 ) 

政 ( 皮 ) = 了 ( 下 一 十) 大 r( 天 )[ 天 廊 ( 二 ) 下 (天 一 1 有 r(R) 十 开 

有 P(R) 一 [一 其 (天 ) 天 让 RE)]PP( 开 一 1 

十 ( 表 ) 一 z() 一 下 工 (和 ( 开 一 1 

下 下) 二 | 一 (二 一 1 一 (一 
己 {《 全 1 一 nz)] 

下 打下 一 | 一 2 六 下 一 1 一 闷 P 天 一 天 一 1 一 捧 5 让 
也 (和 一 上 (一 2 


zf( 友 ) 一 工 ( 开 ) 一 可 1( 到 )zr( 一 划一 二) 一 





7( 开 ) 一 MK)》 一 轩 1(RJEF( 开 一 1 一 人 一 划 。 (Jr 一 nz) 
了 7() 一 卫 ( 开 ) 一 三民 ) 可 7 二 一 1) 一 一 过 (RE) ur 一 7) 
{S.94) 


式 中 ,如 果 定 义 if&)=00> me , 则 向 量 ir() 还 可 以 写成 如 下 的 递 推 形 式 
下 六 是 + 1 


= [zr(RT1)ar( 吉 十 1 2r( 直 十 1)] 工 
- 纯 (用 (和 | -3 人) 
中居 一 2) 


于 呈 二 一 一 二 一 


一 一 全 一 一 = 二 一 一 


| -rt-m] 
而 | 
]  . | 力 


六 (一 ]) 
入 (大 一 2 


一 、 
By 

| 

哑 
= 乞 


必 1 站 六 (一 7 


| (向 (5.95) 
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给 定 初始 状态 S0h P(D，z 人 有) 
产生 系统 输入 、 答 出 观测 数据 





二 1000、 构 造 扎 始 向 量 朵 1 
并 置 凡 (一直 四 








膝 殷 姑且， 计算 zf 直 










计算 天 直 ,有 , 评 有 


输出 上 如 向 停机 





采 迷 数据 , 构造 般 癌 


计算 = 有， or 人 部 ( 
构造 刀 ( 同 











图 $,4 RML 辨识 流程 图 


初始 值 一 般 取 6(0) = efs 为 充分 小 的 向 量 ) ,P(0) = 了 工 及 F(R) =0, 天 = 一 1 
-2,…，- ndzi 并 利用 输入 输出 数据 构造 下 (1) ,使 之 不 为 全 零 向 量 ,网 时 车 证人 1) 
= 请 (1)。 在 这 些 初始 状态 下 ,利用 式 15.94) , 便 可 逐步 递 推 计算 兵 { 人 7) 中 () 和 


站 ()。 
s.4.2 似 然 递 推 法 辨识 MIATLAB 坊 真 及 程序 部 村 


例 5.2 系统 模型 如 图 5.5 所 示 。 试 用 递 推 的 极 大 似 然 法 求 系统 辨识 的 参数 
集 9。 图 中 wkt8 } 为 随机 信号 ,输入 信号 是 幅 值 为 +1 的 M 序列 或 随机 信和 号, 要求 
画 出 程序 流程 图 ,打印 邮 程 序 (程序 中 带 有 注释 } 和 辨识 中 的 参数 误差 曲线 。 

解 ”首先 解释 编程 所 用 的 部 分 字母 :由 于 在 MATLAB 语言 中 无 法 用 希腊 字 


母 描述 ,无 法 用 上 标 及 下 标 , 故 和 () 用 “o" 和 ”“ot ”表示 ; 令 王 () = PE=0,1); 
慌 (&) 一 下 ;产生 M 序列 时 ,afi,pticti) di 表 示 四 级 移 位 需 存 器 的 第 1， 


2,.3,4 级 寄存 器 的 输出 ; 


”144 ， 系 纤 寿 识 其 其 MLATILAB 仿真 


1- 二 40.2s 
in 有) 1 
2 DLLSz 
:一 .444 


图 5.5 证 5.2 系 统 模型 











向 





1) 编程 如 下 

【光盘 上 该 程序 ;FLehsRMLeg2.m ,可 在 MATLAB 6.T 下 直接 运行 ): 
cjlear % 清 零 
afl)=1;btly=0sefl)=1;d1)=0i 出产 生 症 序列 的 四 级 移 位 霖 存 器 的 韦 始 值 "1010 " 
at)=dlig1)=0izt2) 一 0 和 % 韦 始 化 
for ii=2:1200 网 产生 上 惠 序列 af 
df 这 = xore 人 lydti-1)i 和 表示 第 3 和 第 4 肖 存 器 的 输出 模 2 和 作 第 上 过 存 器 的 输 人 
区 这 =a 人 fi 一 Tcf 刘 二 bi 一 TsQ 一 efi 一 TU 三 二 二 
end 声 产 生 mm 六 列 结束 
Di。 入 车 取 去 同 "可 以 存 程序 运行 中 观测 到 世 序 列 各 个 采样 点 上 的 值 
vY= Iandnf1200,1);%% 产 生 正 态 分 布 随机 数 1200 个 
V=0: 。 凤 计 算 嗓 声 方差 , V1 斩 表 
for i= 二 :12 

有 = 了 十 人 和 站 
ead 

VI= ViL200  %% 计 算 曲 声 方 状 结束 
fork=3:1200 向 根 据 v 和 计算 zf 

(kJ 一 1 .2 站 一 0 看 2 一 2 二 一 1+DSxulE 一 2 二 WE 一 KE 一 1 人 .2# YE 一 2 
ead 

ol=0.001x onesf6,1);p0= eye6:6);  。 %% 赋 初 傅 

2 人 1)=01iC2)=0lovft2) 一 0 Tvftt) = 让 Thuf(2y 王 和 13uf(1Y 一 01i 
fork=3:1200 所 递 扒 渤 代 计算 数值 和 误差 值 开始 

h=[-aK-1 -zkE-2uE-1uk-2)vtk 一 ])yvfk-27]; 

Hi = hi 

开 = 罗 #hExk inefhp 加 关 肛 十 厂 

P= [eyefE, 一 玫 <bhtt ws Di wik) = zf) 一 杞 +aoly 


o=ol+ 玫 swfEii =pol=o 网 co 代 表 旨 (tb 
alfk)=ofljiaz(ky=at2yblfk)=of3)ib2fk)=of4)1 9 将 硬 个 参数 分 元 


dt = af5;82(EJ 玉 6) 刘 , 到 ,bl,b2,dL, 此 分 别 是 富 全, 全 ,9 Gas sl 

elfE) = absfalfk)+1,.2)3e2(k)=ats(a2ftky-10.56)5e3(k)= abs(bL 一 1.0)1%% 计 算 误差 
ad) = absfbzig) 一 053ie5(k)=abstdl(kt)+1.0)ie6(1D = ahs( 岂 (ty 一 小 2); 

zKHJ = 区 的 一 则 (xzt(k-1)- 归 (k) zf 一 2);% 构 造 Hf 
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fk 三 三 基 一 QIEJ ulkE -1 一 开 人 su 一 2 
Y 代 天 一 中 让 V 人 区 一 1 一 
好 =[ 一 sk 一 1 一 区 2 
(一 中 UK 一 253vfE 一 TvfE 一 2 
end 。 负 递 准 歧 代 计 算 千 束 
ol 。 向 苛 以 在 程 庆 运 行 中 观察 到 泰 数 ol ,ol 代表 睛 
] 牟 可 以 在 程序 运行 中 观察 到 邑 声 方 关 V1,V1 代表 史 
subplotf2,11) 所 绽 图 
k=1:1200; 
Per 下 ,时 ,8 bb 1 
Xlabelf kk) ， ylabelt patatnetet')， 
titlel The paratmneter idendification of the RML ); 
legendt al= 一 1 22= 站 .6 出 = 人 ,bb2=0.5 = 一 .0 业 =0.209; 上 各 图 标注 
etd 
subpiott4,1 ,27 
KE=1:12005 
BIOEEE el ， 攻 攻 ,e2 ，b1 丰 ,er er 全 
xlabelf ko ylabelt'erior 7) 骆 tlef 误 车 曲线 站 
en 二 
suabplotf4,1,3) 
上 一 1;:1200; 
Blotfk osxabeltk ylahel'inputDi%title( 系统 载 励 信号 :M 序 列 
End 
subplotf4.1.4) 
KE= 1:1200; 
Plotfk,v)3ixiabelf 必 Ji;ylabelf random noise ) 5titlef 系统 所 加 的 随机 申 声 ) 


ed 


2) 程序 运行 结果 如 图 5.6 所 示 

3) RML 因 识 结果 ( 佑 值 ) 与 真 值 的 比较 

RML 辩 识 结果 ( 估 值 ) 与 真 值 的 比较 如 表 S.1 所 示 , 显然 在 虞 声 方差 
1 时 ,可 以 得 到 理想 的 辨识 结果 。 


家 5.1 RML 法 和 值 与 真 值 的 比较 





oz 接近 








4) 程序 调试 注意 事项 


在 绢 程序 时 ,由 于 参数 ai= -1.2,31= -1.0 及 az=0.6,82=0.3 分 别 相差 


二 系统 天 识 及 其 MIATLAB 仿 责 





The p8rstiecfer idendiGeauomr orthe RML 


ParamEET 








由 中 由 名 


， 





| 山 UUU 


图 $,6 RML 准 训 参数 曲线 


很 小 , 故 在 绘图 程序 中 用 plat{ 攻 ,al 下: ,Ka2，b Kbi,ic kb ms ksdli ge， 
k, 吧 ,kk 0) , 即 给 x+ 采用 黑色 的 虚线 必 :! 以 区 别 于 di1; 给 az 采用 蓝 色 的 实 线 出 ' 以 
区 别 于 和 2。 由 于 程序 产生 的 1200 个 正 态 分 布 随 机 数 均 值 不 是 完全 为 零 (或 噪声 
方差 等 于 1) ,上 且 每 次 运行 都 是 随机 的 ,因而 ,不 是 每 次 运行 程序 都 能 得 到 最 理想 的 
估 值 。 在 噪声 方差 最 接近 1 时 ,可 得 到 最 接近 真 值 的 估 值 。 所 以 应 将 程序 多 运行 
几 次 ,在 MATLAE 的 主 界面 上 注意 观察 噪声 方 关 VI(VI 代表 改 ) 和 参数 mo 代 
表 5 ) ,从 而 得 到 最 接近 真 值 的 估 值 。 另 法 :可 在 原 程 序 的 产生 随机 数 (v= randn 
(1200,.1);) 和 计算 噪声 方差 结束 (VI= VZ1200) 之 问 增 加 一 段 判 断 方 关 是 否 接近 
1 的 程序 , 若 接 近 1 程序 继续 运行 , 若 杏 , 另 产生 随机 数 ,也 可 以 帮助 您 得 到 理想 的 
估 值 ， 


5 一 


本 章 的 主要 内 容 是 极 大 似 然 辩 识 方法 ,其 中 5.1.5.2 节 介 绍 了 极 大 似 然 法 的 
基本 概 念 与 极 大 似 然 参数 辨识 的 原理 ,由 条 件 概 率 密 度 函 数 (到 10) 引 出 对 数 似 
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然 末 数 如 (19) ,只 要 似 然 函数 pz18) 取 极 大 伪 便 可 以 使 系统 噪声 方差 最 
小 。 在 5.3 节 动 态 系统 模型 的 参数 极 大 似 然 估计 中 ,介绍 了 动态 系统 模型 及 噪 声 
模型 分 类 、 极 大 似 然 和 最 小 二 乘法 的 关系 ,两 种 基于 极 大 伏 热 的 选 代 法 , 即 DFP 变 
尺度 法 和 Newton-Raphson 法 。 最 后 讨论 了 广泛 应 用 购 递 推 极 大 似 然 办 识 法 求 系 
统 模型 的 参数 集 6 的 方法 和 步 又 ,并 针对 具有 噪声 的 二 阶 系 统 采 用 MATLAB 进 
行 了 编程 仿真 ,程序 中 加 有 详细 的 注释 和 调试 程序 的 方法 。 


习 题 


. 简 述 噪声 的 模型 及 其 分 类 。 

. 白 品 声 和 有 色 只 声 的 区 别 是 什么 ? 

. 极 大 似 然 参 数 估计 与 最 小 二 乘 估 计 主要 区 别 是 什么 ? 

, 其 统 模型 与 图 5.5 相 类 似 , 被 辩 识 系统 中 参数 的 真 值 为 :al= -1.6,az=1.0， 
6i=1.2,5=0.9,di= 一 0.6,cdz=0.2, 试 用 DFP 变 尺 度 法 对 系统 的 参数 进行 准 
识 ,打印 出 辨识 结果 。 提 示 : 按 照 图 5.3TFP 变 尺 度 法 的 流程 图 ,采用 MATTLAB 语 
言 编程 。 


上 hu 一 


一 


第 6 章 离散 随机 系统 的 自 适 应 滤波 


在 介绍 了 古典 辨识 .最 小 二 乘 辩 识 .梯度 校正 辩 识 . 极 大 亿 然 辨识 之 后 ,本章 介 
绍 离 散 随机 系统 的 自 适 应 滤波 。 本 章 前 两 节 的 内 容 为 Bayes 辨识 方法 及 其 Mattab 
仿真 ,6.3 的 内 容 为 卡尔 受 让 波 与 预测 ,最 后 一 节 的 内 容 为 模型 参考 自 适 应 执 识 
方法 。 


6.1 Bayes 辨识 方法 
夏 , 荆 . Bayes 苛 本 原理 


Bayes 办 识 方法 的 基本 思想 是 把 所 要 估计 的 参数 看 做 随机 变量 ,然后 设法 通 
过 观测 与 该 参数 有 关联 的 其 他 变量 ,以 此 来 推 晰 这 个 参数 。 

设 呈 是 描述 某 一 动态 系统 的 模型 ,和 是 模 册 中 的 参数 , 它 会 反映 在 该 动态 系 
统 的 输入 输出 观 训 值 中 。 如 果 系 统 的 输出 变量 =() 在 参数 8 及 其 历史 纪录 
D4 -条件 下 的 概率 密度 函数 是 已 知 的 , 记 作 交 (zx(E)18 ,了 -1) ,其 中 忆 民 7 表 
示人 一 1) 时 刻 以 前 的 输入 输 出 数据 集合 ,那么 根据 Bayes 的 观点 ,参数 f 的 佑 计 问 
题 可 以 看 成 是 把 参数 8 当 作 具有 某 种 先 验 概 率 密度 户 8,D4 7) 的 随机 变量 ,如 
果 输 人 zx(E) 是 确定 的 变量 , 则 利用 Bayes 公式 ,把 参数 的 后 验 概率 密度 冰 数 表 
示 成 

户 (@ 1 了) 二 六 (| gf 开 )) (下 有 DC) 一 直 ( 有 | (二 ) 玫 人 ) 


- 《二 一 寺 
(0D) 疡 (9 下， ) (6.T 


人 芒 (8() | 亿 和) 访 (@ | )d8 


式 中 ,参数 8 的 先 验 概 率 审 度 函数 训 (81D4-0) 及 数据 的 条 件 和 概率 密度 函数 
态 (z{( 开 )| 8,D 芭 -) 是 已 知 的 ; 亚 表 示 & 时 刻 以 前 的 输 人 输出 数据 集合 , 它 与 
卫 佐 的 关系 是 
及 = ;xz( 开 ) (二 ) 五 性 -| 《6.2) 
而 2 和 zf) 为 系统 上 时刻 的 给 人 输出 数据 。 
原则 上 说 ,根据 式 46.1) 可 以 求 得 参数 和 的 后 验 概 率 密 度 函 数 , 但 实际 上 这 是 
困难 的 ,只 有 在 参数 b 与 数据 之 间 的 关系 是 线性 的 ,噪声 又 是 高 斯 分 析 的 情况 下 ， 
才 有 可 能 得 到 式 {6.1) 的 解析 解 。 求 得 参数 6 的 后 验 概 率 密度 琐 数 后 ,就 可 利用 
它 进 一 步 求 得 参数 和 的 估计 值 。 常 用 的 方法 有 两 种 ,一 种 是 极 大 后 验 参数 估计 方 
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法 , 另 一 种 是 条 件 期 望 参 数 估计 方法 ,这 两 种 方法 统称 为 贝 叶 斯 方法 。 
1. 报 大 后 验 参 数 信 计 方 法 
棋 大 后 验 参数 估计 方法 就 是 把 后 验 概率 密度 函数 训 (681 了 ) 达 到 极 大 值 作为 


估计 准则 1]。 在 该 准则 下 求 得 的 参数 估计 值 称 作 极 大 后 验 估 计 , 记 作 和 me。 显 
然 , 极 大 后 验 佑 计 满 足 方程 


ap 1) 
3 人 





<、 二 属 (6.3) 


号 
aljogpft8|B) 

人 
这 意味 着 在 数据 开 条 件 下 ,模型 参数 8 落 在 届 Me 邻 域内 的 概率 比 落 在 其 他 邻 域 的 


概率 要 大 。 或 者 说 ,bwr 是 8 最 可 能 的 聚集 区 域 。 
如 果 把 式 (6.1) 代 人 式 (6.4) ,并 考虑 到 式 (6.1) 右 边 的 分 母 与 四 无 关 , 则 式 
【6.4)? 可 写成 





?一 力 (6.4) 


| 点 一 1 

aogp(z( 且 0 中 )) 本 ologp( ) ;=-。 [6 
当 =(&) 是 在 独立 观测 条 件 下 的 输出 样本 时 , 若 让 式 (6.5) 左 边 的 第 一 项 为 零 , 则 对 
应 的 估计 值 就 是 极 大 似 然 佑 计 。 可 见 ,和 极 大 后 验 估计 比 极 太 似 然 估计 多 考虑 了 参 
数 8 的 先 验 概 率 知 识 。 通 常情 况 下 ,如 果 参 数 8 的 先 验 概 率 密度 郴 数 p(8| 
D4- ID) 为 已 知 , 则 极 大 后 验 估 计 将 优 于 极 大 似 然 估计 。 也 就 是 说 , 极 大 后 验 居 计 
的 精度 将 高 于 极 大 似 然 估 计 。 但 是 ,通常 由 于 没有 参数 g 的 先 验 概 率 知 识 ,加 之 
参数 8 的 后 验 概率 密度 函数 的 计算 礁 度 较 大 ,因此 极 大 位 然 估计 仍然 比 极 大 后 验 
估计 用 得 更 普遍 。 

如 果 参 数 6 在 取 值 范围 内 是 均匀 分 布 的 , 则 参数 的 先 验 概 率 分 布 为 协 方差 
阵 赵 于 无 限 大 的 正 态 分 布 , 即 和 参 数 4 的 先 验 概率 密度 孜 数 可 写成 

一 六 谤 
机 ep- 二 (8 -BTP58 一 本 | (6.6) 
式 中 , N 表示 多 元 参数 0 的 维 数 , 即 N = dim6;6 和 忆 分 别 表示 参数 内 的 寺 值 儿 
协 方差 阵 , 旦 Py 1 一 0。 那 么 式 (6.5) 左 边 第 二 项 为 
?gateD 一 ) ) =- Pi- 一 0 (6.7) 

可 见 , 这 时 航天 后 验 估计 就 退化 成 极 天 似 热 佑 计 。 








万 ( 引 | 也 以- ) = 
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上 述 分 析 表 明 , 极 大 后 验 估 计 与 极 大 做 然 估计 有 着 密切 的 联系 ,但 是 它们 的 基 
本 出 发 点 又 是 不 一 样 的 。 极 大 但 然 估计 立足 于 直接 极 大 化 数据 的 条 件 袜 率 密 度 画 
数 ; 而 极 大 后 验 估计 则 是 基于 极 大 化 参数 b 的 后 验 概 率 密度 六 数 , 它 同 时 考 感 了 
参数 6 的 先 验 概 率 知 识 。 


2. 条 件 期 望 参数 估计 方法 
条 件 期 望 参数 估计 方法 直接 以 参数 9 的 条 件数 学 期 望 作为 参数 估计 值 (2 ,好 
6(k) = E19| Di| = | bp(9| 玉 )49 (6.8) 
上 式 的 物理 意义 是 ,用 随机 变量 的 均值 作为 它 的 估计 值 。 
另外 , 式 (6.8) 所 定义 的 参数 估计 值 让 (&) 将 等 价 于 极 小 化 参数 估计 误差 的 广 
差 的 结果 ,因此 条 件 期 望 估计 有 时 也 称 作 最 小 方差 估计 , 即 闻 (&) 使 得 


瓦 |[8 一 前 ( 开 )] 工 8 一 站 (二 门 | (6.9) 





灰 昌 =8( 二 IDimn 
也 就 是 


| 5e-5C0D]r[e -总 E32(91D8)dg|， (6.10) 


届 = 汪 人) 二 mnin 
式 中 ,6(&) 表 示 参 数 8 的 某 种 估计 量 。 当 BR) = 地 () 时 , 式 (5.10) 达 到 最 小 值 。 
式 46.10) 成 立 的 条 件 是 

中 [6 -六 )]rr8- 人 RE)]508| 5)d6 








日 加 (是 ) 矶 避 -BD 0 46.1) 
求 导 后 得 
| [ee -BeD)12(81D5)dg = 人 《6.12) 
也 就 是 
| 800D2(81Z)d8 -| 8p(6| 环 )d6 (6.13) 


考虑 到 | (6|x)d6 = 1 得 
8 = | ”8@p(8| 玉 )d9 = 忆 19| 下 (6.14) 


可 见 , 式 46,8) 和 (6.9) 的 定义 是 等 价 的 。 
同时 , 式 (46.8? 所 定 习 的 参数 佑 计 值 友人 ) 又 将 使 参数 估计 误差 的 协 方差 阵 取 
极 小 值 , 即 
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忆 并 上 一 有 二 和 一 丰 ( 天 7] 工 | 《6.15) 





准 = 

















也 就 是 
| [8e- 区 [8- 号]Tp(8B)de| (6.16) 
一 日 (二 7 一生 (天 ) 
达到 最 小 值 的 条 件 是 
引 [6 -区 昌 -[8 - 死 访 ]7P(8| 素 )d8 
一 =-0 (06.17) 
了 看 (天 总 占 一 目 {) 
式 中 
af 一 8(k)][@ 下 (1 
3 本) 
- 呈 2 618) 
四 3 六 () 上 3 0v(k) “ 
式 中 第 让 块 抢 阵 为 
a[b-6CE)][6 一 6 
9 人 () 
| 一 [6 一 全 (天 )] ] 
ff ~- [8: 一 和 ()] 0 
_ 本 《6.19) 
一 [ 南 一 和 (一 210 一 Di 一 [on 一 0vt) 
四 作 一 [8 一 本 ()] 必 了 








可 见 ,由 式 (6.17) 必 然 会 导致 式 (6.13)。 也 就 是 说 , 当 和 (RE) = 下 191 玉 上 | 时, 式 
(6.15) 取 极 小 值 。 

上 述 分 析 表 明 ,不 管 参 数 8 的 后 验 概率 密度 函数 取 什 么 形式 ,条 件 期 理 参 数 
估计 总 是 无 偏 一 致 佑 计 。 可 是 ,条 件 期 望 参数 估计 在 计算 上 存在 痢 很 大 的 困难 。 
这 是 因为 让 算式 (6.8) 必 须 事 先 求 得 参数 # 的 后 验 概 率 密度 函数 ,并 且 式 (6.8) 的 
积分 运算 比较 困难 。 因 此 ,一 般 情况 下 ,条件 期 望 参数 估计 在 工程 上 是 难以 应 用 
的 。 但 是 ,正如 上 面 提 到 过 的 ,如 果 参 数 6 与 输入 输出 数据 之 间 的 关系 是 线性 的 ， 
而 且 数 据 噪声 最 从 高 斯 分 布 ,那么 式 (6.8) 将 有 准确 解 。 下 面 将 主要 讨论 Bayes 方 
法 在 这 种 情况 下 的 模型 参数 压 识 问题 。 
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6.1.2 最 小 二 乘 模型 的 Hayes 参数 办 识 


考虑 模型 
fw 1)e( 人 RE) 一旦 (xz (上 去) 十 本) [日 .20) 
式 中 ,ja(e 站 是 均值 为 零 . 方 莽 为 cv 的 服从 高 斯 分 布 的 白 噪 声 序列 ; 旧 


A(z 二 1T+Taz 十 十 Cn 和 
BCz-1y 一 古 1z 十 十 Ca (6.21) 
模型 防 次 了 ia 和 科 事先 给 定 。 
模型 (6.20) 可 以 写成 最 小 二 乘 格式 
zfR) 一 丰 T() 本 二 Te( 开 ) [6.221 


式 中 
于 (天 二 [一 z( 开 一 1 一 >( 才 一 了) 一 1 
(56 .23 1 
应 用 Bayes 方法 估计 模型 (6.22) 的 参数 8 时 ,首先 要 把 参数 有 看 做 随机 变量 ,然后 
利用 式 (6.4) 或 (6.8) 来 确定 参数 4 的 估计 值 。 显 然 , 无 论 利 用 哪个 式 子 求 参数 估 
计 值 都 需要 预先 确定 参数 4 的 后 验 概率 密度 函数 户 (8| 下 )。 根 据 式 (6.1) ,并 利 
用 下 面 Bayes 公式 





户 (ae) = 让 (z| 忆 ce) 疡 (二 | <) 5.24a) 
或 进一步 写成 
四 (z|Bic)y= 记 (bascJptaelcjx pelc) 《6.24Db) 
可 得 参数 8 的 后 验 概率 密度 函数 为 
CCz 人 18,D2 7) 训 | 下 和) 
户 (9| 到) 5C20NT DecD) (6.25) 


设 参数 6 在 数据 了 9 条 件 下 的 先 验 概率 分 布 是 均值 为 和 (0) , 协 方差 阵 为 号 (0) 
的 正 态 分 布 , 即 
{27) -全 


中 | D8) = 
28 1 w det 有 (0 
式 中 ,N= dm8, 则 参数 8 在 数据 焉 条件 下 的 后 验 概率 分 布 也 是 正 态 分 布 的 ,其 


均值 和 协 方差 阵 分 别 记 作 看 (上 和 (8&)。 于 是 ,参数 6 在 数据 呈 “ ”条件 下 的 概 
率 分 布 可 写成 


六 (8 DCD) = 





exp| 一 了 [8 一 在 (07]TP-L60)[ 如 一 在 (0)] 【6.26) 


(2x) 


w det 吾 ( 开 一 雪 
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x exp 一 了 [8 一 站 (一 1]TP IO 一 1)[B 一 站 (一 | [6.27) 


同时 ,由 于 噪 声 服从 正 态 分 布 ,pf 人 fk) 一 AD0,o ,结合 式 (6.22), 则 有 >z( 上 ) 一 
人 


sd - 5 -ro8| (6.28) 





方 ( 二 (二 ) | 加， ) 一 


A 也 
将 式 (6.28) 和 (6.27) 代 大 式 16.25) ,得 


主 。 
8| DO = Nom so- 起 [9 -hr(68P -二 [9 - 60- Di 





xPaIk-Dfe 一 BID (6.29) 
式 中 ,Nerm 与 彤 无 其 , 且 
(2 避 司 
Norm = 一 一 一 -一 - (6.301 


pf(z(EJLDL- 了 PT -1 
式 146.29) 两 边 取 对 数 后 为 


logz( 和 | 环 )》 = const 一 (有 一 严 芳 下] 各] 
0 


-了 [8 一 和 (TPR -1)[8 一 下 (人 -ID] (6.31) 
将 上 式 右边 展开 ,并 整理 成 二 次 型 


logp(8 | De) =oonst - 了 |8 _- 二 (有 天 (= -PP 16- 


x 下 IC 8 -PP( 有 有 ()z 人 (天 


-POP -DECE-D (6.32) 
式 中 
亚 - (下 ) -1( 有 1) + 二 有 (有 ) 有 T( 夺 ) 《6.33) 
得 
P{R)P-L(E -1) = TCDACODATC) (6.34) 


代 人 式 16.32) ,有 


log 六 (和 | 下) = const 一 本 (8 - DTP-ICA)(8 一 可 (6.35) 
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式 中 
在 = 剑 (& 一 1) + 二 P( 有 ) 玉 (上 )[z( 放 ) 一 一 ID (6.36) 
厅 m 


根据 式 (6.4) , 当 计 人 (k) = 站 时 ,logp(8| 丙 ) 达 到 最 太 值 。 因 此 十 (人 ) = 和 是 参数 
在 站 时 肇 的 极 大 后 验 估 计 . 
席 时 , 式 46.35) 意 味 着 参数 8 的 后 验 概率 密度 函数 为 


六 (和 | 王 )》 = Normn exp -六 (9 - TPR)6 一 一 ) 《6.37) 


根据 式 (6.8), 有 
8(6) = 玉 i= (6.38) 
可 匈 ,模型 式 (6.22) 的 极 大 后 验 参数 估计 和 条 件 期 望 参 数 估计 两 者 的 结果 是 一 致 
的 。 但 是 ,这 并 不 能 说 两 种 参数 佑 计 方 法 对 所 有 问题 的 估计 结果 都 是 一 致 的 。 一 
般 说 来 , 当 上 比较 小 时 ,这 两 种 方法 的 佑 计 结果 是 不 同 的 ; 当 大 比较 大 时 ,它们 就 
没有 付 么 差别 了 ,两 者 的 估计 结果 将 趋 于 一 致 。 
如 果 对 式 (6.33) 使 用 一 次 惩 阵 反 演 公 式 ,并 令 


枚 (有 ) = -PP( 皮 ) 丙 ( 友 ) (6.39) 
厅 了 


则 类 似 于 最 小 二 乘 递 推算 法 的 推导 ,可 求 得 Bayes 方法 的 参数 递 推 估 计算 法 为 
在 () = 让 (下 一 上 + 政 ( 开 zR》 一 天 (天 ) 全 ( 开 一 1)] 
必 = 中 (二 一 1) 且 (天 [用 区 二) 严 ( 才 一 1 下 人) + ac (6.4 可) 
所 (有 ) = [ 开 一 正 ( 开 ) 天 元 )] 也 ( 开 一 1) 
显然 ,在 假设 正 态 分 布 的 前 所 下 ,Bayes 估计 和 Markov 佑 计 是 一 致 的 , 它 相当 于 加 
权 最 小 二 乘法 中 的 加 权 因 子 了 4(&)=17 ax。 


6.2 Bayes 辨识 的 MATLAB 仿真 


例 6.1 考虑 图 6.1 所 示 的 仿真 对 象 ,图 中 ，v(&) 是 均值 为 零 . 方 差 为 os 的 
服从 正 态 分 布 的 不 相关 随机 噪声 , 且 


-1 DCz 一 ) 
0 NG ) CUz-1) 
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Arfz-I) =1-1.Saisr1+0.7572 = C0zrly) 
有 (zl1) = 1.0zc-1+0.Szx 
Drfz =-z 1+0.2z 


工作 癌 请 霍 , 给 4 好 4 齐 列 的 长 度 Z 卫 值 


用 4 位 移 位 寄存 器 产生 幅 值 为 1 的 输入 信号 


产生 随机 噪声 六 号 并 计算 其 方差 









五 出 输入 信号 程 线 国 形 及 随机 噪声 图 形 
给 被 辩 识 参数 训 和 P 赋 初 值 


按 是 式 (6.40) 的 第 2 式 计 算 大 内 
按照 式 (6.40) 的 第 1 式 计 算 如 


按照 式 (6.4 自 的 第 了 式 计 算 用 属 


计算 系统 的 实际 输出 山 虚 碎 模 型 的 响应 


按照 式 (3.67) 计 算 被 办 识 全数 的 收 笋 情况 


上 类 数 收 各 各 足 要 求 ? 





Y 
显示 被 辨识 参数 ， 收 敏 情况 、 输出 采样 、 系 统 实际 输出 、 模 型 输出 等 数值 


画 出 被 辩 识 参数 上 的 各 雇 估计 值 、 收 总 情况 、 系 统 的 实际 和 输出、 采样 值 及 模型 输出 的 图 形 


图 6,2 Bayes 辨识 的 MATLAB 6.0 程 序 流程 图 


”1133 


* 136 ， 系统 鲜 识 及 其 MATLAB 仿真 


模型 结构 选用 如 下 形式 
喧 ( 开 ) 十 呈 ( 开 一 1) 十 人 (有 一 2) 
荆 太 ] 太 (和 一 下 ) 十 而 让 下 一 2 十 本 下) 十 本 1 可 (二 一] 十 人 mA 一 2)] 
Bayes 因 识 算法 程序 程 如 图 6,2 所 示 ,MATLAB 6.0 程 序 如 下 。 
% Bayes 辨识 墟 序 , 在 光 系 中 的 文件 名 :FLeh6HAegt.me 
fear 
L= 扣 ;: 和 四 位 称 位 寄存 器 产生 的 M 序列 的 长 庶 
叶 =12=1 人 =]i 双 = 届 纪 四 个 移 位 寄存 器 药 辖 出 韧 始 值 
fiori=1 1. 
xl 三 xor( 六 ,4) 的 第 一 个 移 位 寄 让 器 的 输 大 信号 
邓 =715% 第 二 个 移 亿 寄存 器 的 输入 信和 号 
双 = 六 5% 第 三 个 移 亿 寄存 器 的 输 人 信号 
到 = 呈 35% 第 四 个 移 位 寄存 器 的 输 人 信和 号 
fi 一 由 :多 第 四 个 称 位 寄存 器 的 输出 信和 号 
这 >(>>0.5:ufiD= 一 1M 序列 的 值 为 "1 "时 ,辨识 的 输入 信号 取 " -1 
else 以 详 = 和 M 序列 的 值 为 加 "时 , 斩 识 的 输入 信和 号 联 "1 
enadq 
史 =x1 了 = 地: 呈 = 冯 ;4= 妈 ;中 为 下 一 次 的 输入 信号 作 谁 备 
endt 
fguret1yysobplotf2 1)3stemfu) grid on 双 画 第 一 个 图 形 的 第 一 个 子 医 
= randnf1,60)3subbloatf2,1.211 台 产 生 一 组 民 庶 为 旬 的 正 碍 分 布 随机 噪声 
Biotfe) ,griq on; 台 函 第 一 个 图 形 窗 口 的 第 二 个 子 图 一 一 随机 噪声 信和 号 
及 = ceorreoeffu,v5 骆 计算 输 人 信号 与 随机 噪声 信号 的 相关 系 雪 
r= 及 (1,2) %% 取 出 并 显示 互相 关系 数 
m=&tdvJtastdtv)% 计 算 并 显 下 随机 凤 声 的 方 卷 
uvy 邓 显 示 输 入 信 生 和 噪声 信号 
zt2)=0izll)=0issf2)=0izsfl)=0; 输出 采样 、 系 统 实 际 输出 .模型 输出 贱 初 值 
amf2)=0izml)=0;% 模 型 输出 赋 初 值 
双 Bayes 辨识 
名 = [0.0010.0010.0010.0010.0010.001 0.001]' ;多 直接 给 出 被 辩 识 参数 的 初 冶 值 , 即 一 个 充分 小 的 
% 实 向 重 
名 =106x* eye[7,7);% 直 接 给 出 初始 状态 PD, 即 一 个 充分 天 的 实数 单位 定 阵 
下 =0.00000000005; % 取 想 对 误差 了 < =0.000000005 为 蛋 酉 准则 
<=Fc0,zerost7,14)];% 雏 办 这 参 数 矩 阵 的 初始 值 及 大 小 
e= zelost 7,15); 的 相对 误差 的 初始 值 及 天 小 
for k=3:20;% 开 硼 求 玉 
zfk)= -1.53gfk 一 1+07xeztk-2)+ugk-1)+0.Ssutk 一 27》+vtk) 一 VCK-17 DY(E~2)1 
% 系统 在 M 序列 输 人 下 的 输出 采样 信号 
bl1=[ 一 zfKE- 1 一 zkE 一 2)utk 一 Lutk--2)vkvtk-1yyvfk~2)] ;入 为 求 攻 (kr) 作 准备 
hl sthl+rvi 











M 序列 输 人 信号 





XL 一 invfx)i 
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KE = 拉 关 hh]*Xli 各 民 

dlL=zfk) 一 hiseo0; 和 开始 求 被 辩 识 参数 " 

ct=c+kyali% 因 识 参 数 

af)= 一 1.5* ak 一 1)+0.7xz(k 一 2)+TWKE-1I+TOSs ARE 一 2)5%% 系 统 在 M 序列 输 人 于 的 输出 啊 应 
amtfk)=[ 一 zk-13 一 ?FE-2)utk-lyutk 一 2]*[eltoselg2yselt3yicltd4)]; 9% 横 型 的 输出 师 点 
4 = 一 号 

辽 =e 相 ,/ 吉 ,和 % 求 参数 的 相对 变化 

EfE) 一 加 | 

四 =eli% 络 下 一 殉 用 

cf iik)=cl; 铝 把 辩 识 参数 < 列 向 量 加 人 办 放 参 数 守 阵 

Bl= 的 一 KLsskl sfbhti sxbp0sRhI+Ili 加 fnd py 

癌 =pbli; 扩 给 下 次 用 

计 包 < = 刁 breakji 名 车 收 各 情 襄 满足 要 求 , 终 上 上 计算 


end 





ed 
cye,z,zs;zm % 显 示 被 大 识 称 数 . 收 急 情况 .输出 采样 值 .实际 三 出 值 、 煤 型 畏 出 值 
双 分 离 赋值 
alL=eft :ia2=ef2jibl=er3yjbh2= 以 4 有 分 亢 出 al.a2.hl.bz 
呀 =ef52=e6 3 的 =cf7 5 分离 出 出 、 玫 . 烛 
eal= ef :yea2=eg2， ;6ebl= 昌 :iab2= ef 凡人 分 离 出 了 二 .bl.ba 的 收 分 情 总 
edl= ef: 5ei2=e6, iai=e7 了 分离 贞 册 ,下 .和 双 的 收 务 情况 
figvret3)1 入 而 第 二 个 图 形 
1 一 1420; 
Blotti ad 地， 和 bb id 让 出 被 辨识 参 的 得 玖 个 计 坦 
titlef "Paraimeter Tdentifieation with Recursive Least Sauares Method ) 负 标题 
fguref3];% 画 出 第 三 个 锣 形 
一 上 20 
Plottiyeal ,riea2 ,Tebt hb ieb2 ,biedl ,如 ied2, ged2r+ 多 画册 吉 个 参数 吉 仇 情况 
titef Identifieation Error0 各 标题 
驼 Response 折 响 应 
figuret4yisubplet(d4,1 15%% 夯 出 第 趾 个 图 形 中 的 第 一 个 子 图 
i= 革 :20plortizsfiy,z 和 通 出 被 辨识 又 统 在 设 有 噪声 请 沈 下 的 实际 输出 响应 
subplett4 ,1 23)4 台 画 出 第 四 个 图 形 中 的 第 二 个 子 图 
i=1:20;plotfi,z ie 7%% 画 出 被 辨识 系统 输出 的 采样 值 
subpletf4.1.3); % 画 出 第 下 个 图 形 中 的 第 三 个 子 图 
i=1;20;pletfizmti,b% 画 出 模型 含有 咯 声 的 输出 啊 应 
subplotf4 ,T.4)11 入 画 出 第 四 个 图 形 中 的 第 四 个 子 图 
i=1:203;pletfiyzmyf ,b 听 出 模型 去 除 曝 声 后 的 输出 响应 
程序 执行 结果 如 下: 
u 一 
[1 -1 -1.-1111, -1.4,1. -1 -11 一 ,一 1 -1 -1 11 一 1- 11，1，1， 
- ，-11,t -1 -1 -TI 一 1 -1 -1 -1 -JIT1L 一 Ti-i,- Il， 刘 
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一 
[ 一 站 43266， 一 上 .看 655 , 昌 .1253 .2877，， 工 1485 19 阳 ，1 ]892.。 一 口 .0376 和 ,3273 0.1745, 一口 .1867 .0.7253， 一 站 .5883,2 .1832， 

一 和 1365 省 .1139 ,1 .着 瘟 ,, 083， 中. 妥 站 ,一 0 .有 和, 人 .2944 ,一 【333620714,L .人 牢 ,- 必 , 的 1 用 .85 加 ,1.250. -1.5937， 

.4 站 四 .5711 一身.3999 ,个 6900 ,0 ,1 全 711- 22066586 ,1 ,开放 ,一 1.2025, 一 由 D198， 一 全,1S67 ,一 下. BO .0.2573， 

一 11.0565 ,二 .51 一 站. 803 .站 .32 要 。 一 让 .9 但 ,一 全 1703， 一作.00592 一 工 .0106 站 .6145 0.3077 1. 的 24.0. 的 13， 一 站 .机 3 短 ， 

站 3803 一 1.0091 .一 站 .015, 一 由 ,到 驼 ] 

my = 

.8991 

了 二 

站 .0591 

6 

0.00100 0.notn -00004 一 由 .1558 一 0.9692 -1.2967 -1.393 扫 -1300 -1.5000 一 1.5000 一 1.5000 
用 .的 切 帮 0.0i0 0.00t10 0.944 0903 03I% 0404 07000 00 07000 0.7000 
有 ,的 雪 玫 站 .让 2425 0.45537 用 .5715 和 7941 De 1.0000 LO Lo IO0000 
用 .0 的 六 和 站 34 和 0242 DG 1.1565 10 1.094 0.5000 0.3000 53000 05000 
和 .的 志和 站 .03] 直 种 .0317 0.9779 由 ,入 功 1.1953 1.2o61 1.0D000 t+.0OUU0 1.0000 1.0000 
0.0010 0 0.4027 -0 404 -0. 台 红 一 2 到 下.4734 0. 科 了 9 一 .0000 -1.0000 -1.0000 一 1.0000 
0.0010 0 -0.1038 一 Di -0.3099 -0.4045 -0.065 人.0328 0.2000 0.2000 0.2000 “0.2000 
忆 二 

性 妖 妖 一 1. 和 拉 坟 3.1896 ,21 必 . 招 了 心 -DB7 曲 .1245 -OO .000 .0O000 

了 站 人 妖 到 5.4254 一 中 5S8 一 0.6462 0.2662 0.7303 下 00 100000 一 0.0u00 
站 站 -242.3907 0.0044 一 .8705 人 .4734 0.182y 一 0.1363 各, 科 让 3 .0000 0.0000 一 0.0000 
站 站 到,3607 -0.0055 1,8042 0. 天鹅 一 0.3089 -0.0109 一 0.5005 “0.0000 -0.0000 0,D0o0 
站 口 和 .304 0.0105 区 .向 由 一 小 4365 1 15 巾 避 .0as 一 站 14 一口 .0000 一 00000 TD0o00 

站 站 -03.721 -0.0009 -0, 习 7 一 0.2552 .6 有 一 0.0623 1.2527 0.D000 0.0000 一 站 bb00 
站 DO -10O4.8399 .0387 3.8003 一 DO 一 0D.8305 -14781 SO0oR 一 .OO .IO 站 .DO 


Bayes 辩 识 结果 见 表 6.1。 仿 真 结果 表明 ,Bayes 最 小 二 乘 辩 识 , 递 推 到 第 9 步 
时 ,参数 辩 识 的 结果 达到 稳定 状态 , 即 cl;= -1.5000,az=0.7000,51 三 1.0000,52 
=0.5000,di =1.0000,a = -1.0000,d43=0.2000。 此 时 .辨识 参数 的 相对 变化 
量 已 去 0.000 000 005。 可 见 , 此 例 的 Bayes 最 小 二 乘 递 推 算法 的 办 识 结果 与 增 广 
最 小 二 乘 递 推 算法 的 辨识 结果 是 一 致 的 。 
表 6,1 ”Bayes 辨 识 结果 














志 茹 三 | 2 刁 1 已 2 碟 1 他 2 邓 3 
真 值 ~-1.5 0.7 1 .0 .5 1.0 -1.0 D,2 
帖 计 慎 一 1.5 0.7 1 .0 0.5 1.0 一 上 必 0.2 





程序 中 ,预先 把 参数 的 估计 值 算 阵 、 参 数 的 收 和 令 状 况 矩 阵 及 系统 和 模型 的 明 应 
符 阵 的 初始 值 均 设 定 为 零 ,所 以 , 当 参 数 的 收敛 状况 满足 要 求 时 ,程序 就 停止 运行 。 
在 图 6.3 中 可 以 着 到 ,各 项 计算 数值 和 输出 数值 均 变 为 零 的 时 刻 , 即 为 程序 停止 运 


行 的 时 刻 。 随 着 王 的 取 值 的 减 小 ,程序 停止 运行 的 时 敌 将 向 后 推移 。 


iu， - -- 一 赋 : oem 一-- 一 一 一 一 一 - 
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图 6.3 Bayes 辨识 仿真 
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需要 强调 指出 ,加 在 辨识 系统 上 的 噪声 是 随机 噪声 , 即 每 次 辨识 过 程 中 的 噪声 
且 惟一 的 ,所 以 每 一 次 程序 运行 的 中 间 过 程 是 不 同 的 ,但 参数 辩 识 的 最 终结 果 是 一 
致 的 。 





6.3 Kalman 滤波 


Kalman 泪 波 是 现代 控 制 理论 的 -…… 个 重要 支柱 。 它 有 善 一 个 递 推 的 表述 形式 ， 
适合 于 实时 预测 与 滤波 ,有 旦 易于 在 数字 计算 机 上 实现 ,因此 在 实际 问题 中 得 到 了 广 
泛 的 应 用 [494.48.%91， 本 节 内 容 为 卡尔 曼 理 论 最 初 讨论 的 离 山 线性 时 变 系 统 状态 最 
小 方差 滤波 与 预测 问题 。 

帮 .3-1 预测、 滤波 与 平滑 

预 油 滤波 与 平滑 ,它们 的 总 称 就 是 估计 :和 多。 下 面具 伍 解释 预测 .滤波 与 平滑 

的 概念 。 


设 xf(8) 为 待 估计 的 矢量 , 丰 =HT 2 为 对 x() 的 实测 
值 。 若 能 根据 岂 决 定 一 个 x(K) 的 近似 值 


( 17) = 天 六 (6.41) 
则 x (1 ) 称 为 根据 世 决 定 的 x(k) 的 估计 。 而 
X(R1 门 = 芭 ( 人 一 区 (上门 (6.42) 
称 为 x(&) 的 估计 误差。 车 
(R | 门 一 夺 ( 册 ) 十 瑟 (6.43) 


式 中 ,4 为 第 阵 , 为 矢量 。 则 这 种 特殊 的 估计 称 为 线性 估计 。 六 > 的 估计 称 为 
预 调 或 外 推 沁 = 了 的 估计 称 为 泪 波 妆 <7y 的 估计 称 为 平滑 或 内 搬 。 
若 误 差 的 均值 
王 [x( 有 | 人 四] = 王 [xz 一 (1) 门 ] = 0 (6.44) 


则 称 z08| 太 为 zt) 之 无 偏 估计 。 对 无 偏 估计 而 言 , 估 计 *( 17 以 相等 的 概率 分 
布 在 x(&) 的 两 边 。 
设 常 矢量 & 和 x*(E) 同 维 数 , 刚 aix(&) 表 示 e 和 xft) 的 某 个 分 量 或 某 些 分 
量 的 线性 组 合 。 若 估计 x( 才 | 四 使 得 准 风 函数 
本 = 五 [arIxf( 开 | 门 ][eITzr(R | 门下 = min 《6.45) 
则 ,zfE17) 称 为 工 (RE) 的 最 小 方差 个 计 。 根 据 参 考 文献 [49] 可 知 , 当 用 
开 [x (二 )| 区 ] 作 为 x 人 ?的 估计 值 时 , 它 既 是 无 偏 估 计 , 又 是 最 小 方差 合计 
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1.3.2 高 斯 变量 估计 


兰 待 估计 矢量 x() 与 实测 值 族 的 联合 分 布 是 高 斯 型 的 ,那么 x() 的 最 小 方 
差 估 计 将 有 一 个 明显 的 表达 式 。 下 面 就 来 决定 这 一 开 达 式 。 简 记 x(R) = ，， 
yw =y, 设 (xz 7) 服从 高 斯 分 布 , 且 


E{z)= (z)- mm (6.46) 


E 人 -ex 07 一) 


-| va 三 ) COV(， 了 
cov[ 了， warf 7 

=(R 了 ?j= (6.47) 
则 

Et 1) 一 基 +eovfr ,yjJvarlfyty 一 了 《5.48) 
而 估计 误差 的 方差 
var(X) 一 疡 [w 一 下 (zx 一 EECzl3] 
一 varfx) -ceorf(z yj)varify)，covy:z] (6.49) 


很 显然 , 式 (6.48) 给 出 了 xz(R) 的 最 小 方差 估计 ,而 式 (6.49) 给 出 了 相应 误差 的 方 
差 。 由 于 式 (6.46) 中 的 闫 与 式 (6.47) 中 的 民 都 不 依赖 于 x 与 了 的 取 值 ,所 以 ,高 
斯 变量 的 最 小 方差 估计 是 一 种 线性 估计。 下 面 给 出 式 46.48) 和 (6.49) 的 证 明 。 
做 天 量 
一半 一 元 一 下 PyLI(7 - 亚 ) (6.50) 
则 
y 一 YY- 荆 一 及 Piy 一 =10 (6.51) 
故 协 方差 
cov(p，y) = 王 [r(y 一 乡 ] 
一 五 ( 一下) 一) 
一 及 PE 一 了 7 一 了 ) 
= 及 - RPR 下 (6.52) 
即 ,* 与 ?不 相关 。 又 因 ， 是 * 与 y 的 线性 函数 ,* 也 应 是 高 斯 变量 , 故 ” 与? 互相 
独立 。 而 * 的 方差 
varfy) = 五 人 一斑 )f 一 记 ) 
一 开 (x 一 天 ) 人 区 一 二 并 一 五 (一 才 )( 了 一 了 PP 囊 


”162 ， 系 狗 办 识 及 其 MATILAES 仿真 





一 中 ,Py 开 (7 一 了) 一) 
+ 民 PyE(y 7)(7 一 了 )T7 及 mw = 瑟 , 一 古 P7 Rn 


= varfy) -coyfz yy)var ifyjoov[ yx) (6.53) 
显然 
x 一 了 | 下: 国 P 
0 0 昌 (6 534] 





设 x 与 是? 维 随 机 向 量 , 当 已 知 (yT, 阅 )7 的 密度 函数 FJ) 时 ,fx 7) 
的 密度 画 数 








_ az,y) | 。 
Fr = FU) 拓 3 5 (6 .55) 
而 式 中 
[az 
ax,y) ay 9y| T Raopy | 
5(y ,人 = det ay ay 一 oa| 7 |- 1 ( 厂 .56) 
(3m 9 
是 变量 (xzT,yT) 并 相对 变量 的 雅 可 比 行列 式 ， 故 有 
_ 一 一 和 _ .TTP-l 
所 交 | 一 AD) 天 由 0 7 有 ) 
1 
(2xjn2fdetP,)12 
X exp -Ex - 工 -RoPil(y 一 人 ]IP[z 一 xz 一 玉 oP 7 -yy)] 
《6.57) 
很 显然 ,在 已 知 y 的 条 件 下 ,zx 依然 服从 高 斯 分 布 , 且 其 条 件 均值 
EUx 1y)yr==Y+ 有 PICy -了 ) (6.58) 
此 式 表明 , 式 46.50) 所 示 之 v 即 xz 的 最 小 方差 估计 的 误差 ,也 就 是 说 
y = 也 (6.59) 


而 式 (6.57) 的 第 二 个 等 号 的 右边 又 给 出 了 * 的 密 彦 函 数 , 故 有 
vatfXy = varfy) = War(Y) 一 covfryy)war 3)eowf 了) 天) 《6.60) 
于 是 , 式 (6.48) 和 (6.49) 得 证 。 
若 对 x* 有 两 组 独立 的 测量 ? 与 z, 且 (xz,y,z) 的 联合 分 布 是 高 斯 型 的 ,那么 可 
将 向 量 (yT,zT)T 看 做 是 测量 值 , 而 有 x 的 最 小 方差 估计 
X 一 Erly,z)= Erl7y) 二 瑟 (x|z) 一 攻 [6.611) 
现 将 上 式 的 第 二 个 等 号 证 明 如 下 , 令 
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z =《yT,zT)T 


吧 
PP 
Le 
而 
cov(w 于 ) 一下 (二 一 二 光 什 一下) 
-、TT 
2 


由 式 (6.48) 得 
开 (x| yx) = 瑟 人 za) 
= 工 +T covfx 8)var ee) 一 下) 
= 工 + 及 oP7yy 一 7) + 及 Pafz 一 xz) 


本 


一 琴 (x | 轨 ) 上 + 吾 (|z) 一 六 
于 是 , 式 (6.61) 得 证 。 


(6.64) 


《0.65) 


者 对 x 有 两 组 非 独 立 的 测量 ?了 与 =, 且 (x*,y,z) 的 联合 分 布 仍 是 高 斯 型 的 , 那 


人 么 x* 的 最 小 方 善 估计 
二 = 巨 (z|yz] 一 下 (zlyx) 


式 中 , z 是 以 ? 为 测量 值 对 z 的 最 小 方差 估计 冯 的 估计 误差 , 邯 
xz =xz-R(zly)=z- 工 一 RaoPyY 一 了 ) 
且 
下 () = 
cov( 二 ,9) 一 修 
根据 式 (6.61) ,同时 考虑 到 
下 (rrlyyz) = 瑟 (z| 全 ) 
式 (6.66) 还 可 以 写 为 


这 三 书 (7| 及 十 五 ( 交 | 到 ) 一 


《6.66) 


{66.67) 


(5.68》 
(6.69) 


《6 .70 


《6.71) 


式 (6.66) 的 重要 人 性 在 于 , 它 将 相关 调 量 下 的 估计 问题 转化 为 等 效 的 互相 独立 的 测 


基 下 的 佑 计 问 题 。 这 样 做 的 结果 可 能 导致 计算 工作 得 到 某 种 简化 。 
1.3.3 开 alinan 滤波 与 预测 


对 于 线性 随机 系统 的 自 适度 滤波 问题 而 言 , 自 适 应 滤波 器 就 是 一 个 具有 学 习 
功能 的 Kalman 滤波 器 。 或 者 说 , 自 适 应 滤波 器 可 以 根据 所 得 测量 数据 做 出 必要 
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的 决策 ,以 调整 泪 波 程序 ,使 之 适应 系统 或 环境 的 变化 ,从 而 得 到 接近 最 优 的 状态 
估计 。 图 6.4 给 出 了 这 种 泪 波 器 的 结构 。 









区 alman 姓 波 器 





图 6.4 自 适 应 证 波 的 结构 示意 图 


Kalman 滤波 是 把 不 可 观测 的 待 佑 计 的 状态 变量 x 看 做 随机 变量 ,这些 状态 
变量 与 可 疯 测 的 输 和 人 输出 变量 是 密切 相关 的 ,Katman 滤波 正 是 基于 这 些 可 灿 测 的 
输 和 人 输出 变量 去 推断 那些 不 可 观测 的 状态 变量 。 

现 人 很 设 系统 的 状态 方程 与 测量 方程 分 别 是 

(下 十 1) = 划 ( 环 十] 到 ) 区 [下 ) 十 1 是 )o( 到 ) 
2 天 )》 二 中 (到 ) 工 (下 ) 十 臣下) 
式 中 ,ja(t) ET:|a(E) GE 工 | 均 为 高 斯 序列 , 工 是 上 的 集合 ;1z40)| 为 高 斯 
变量 。 卫 


(6.721) 


ow( 此 ) = 避 () 一 和， < 人 0) = 三 

COv[ of 区 二 愉 葡 是) 

4 cov[ 本) 人 让 二 用 2 下 85 (16.73) 
warlxrfo)] = Pzrt0y = Po 

cov[m() io = covlmw(R) ztD)] = cov[oRy TO)] = 0 

式 中 , 灵 , (Po 为 非 负 定 阵 ,及 2 为 让 定 阵 ,以 上 诸 条 件 在 《,jE 了 时 都 存在 。 





] . 攻 alman 预测 公式 
设 & 上 > ,由 式 (6.72) 知 ,类 与 j 两 瞬时 的 状态 满足 方程 
tf》 一 下 (下 ,让 工 (让 十 之 | 多 (Ra 人 一 of-1) (6.74) 


洛 已 知 直 到 ) 瞪 时 的 实测 的 输出 值 
罗 二 (DT2)，y (6.75) 
那么 ,根据 
莹 (二 1 7) 二 瑟 [z(k) 1 公 ] (6.76) 
有 z(&) 的 最 小 沟 方 预测 值 
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工 ( 开 | 了) = 下 [zu] 
一 忆 [zx(R) 1 人 L) Ca2)7 7 


王 夷 去 ,让 王 | 荆 人 ) 1 区] 二 了 风 [ 天) 了 7 位 一 1 五 [at 一 二 1 


[6.77) 
当 &z27 时 ,根据 
五 [z(R) 一 人 并 (RE)] [afR) 一 o(R)T=10 
瑟 [w( 开 ) 一 呈 ( 有 )][z( 开 ) 一 袜 ( 开 )] 工 = 0 
下 [xz 门 一 立 人 [af -of = 0 
开 [ (下 ) 一 巴 ( 玫 )j Le) 一 工 (7 让 ] = (6.78) 
有 
[@( 下 ) EC) 3 门 ] = 瑟 [w()] = 站 0 《6.79) 
故 有 状态 预测 公式 
工 ( 下 上 让 一 中 (让 了 (1 (6.80) 


考虑 到 最 小 方差 知 计 万 是 一 种 无 仿 佑 计 , 故 上 述 的 预测 误差 的 方差 可 写作 
户 (下 | 门 = 瑟 [ 节 (用 ) 一 工 (二 | 站] [zz 人 有)》 一 福 { 二 上] 
= 下 18 站 [zG) 一 信 ( 让 + Z RDD9G De 一 1 


十 训 上 [z( 让 一 到 全 及] + 站 有 3 Do 一 了 | (6.81) 
考虑 到 |w( 开 ) ,短工 [的 独立 性 质 ,及 
下 [ztj),aflziy] = 0 《6.82) 
在 ; 委 # 时 成 立 , 故 有 
已 (二 1 让 = 负 ( 有 上 PUT 门下 [二 上 了 
十 和 网 ( 二 ,in 一 TREE 一 1)7T0z 一 1)ET(E (6.83) 


式 (6.81) 与 (6. 83) 表 明 ， 欲 预 测 状态 及 确定 状态 误差 的 方差 ， 应 解决 状态 滤波 吧 滤 
波 误 差 的 方差 问题 。Kalman 滤波 公式 实际 上 就 是 一 误 递 推 线性 滤波 公式 。 它 的 


出 发 点 是 给 定 z1010) 与 PC00) ,每 实测 出 一 个 >(&) ,该 递 推 公式 即 能 利用 前 一 
瞬时 的 滤波 结果 z(R -11 与 已 ( 二 -1 工 下 一 1 计算 出 六 瞬时 的 z (| 与 


EC(EIE) 一 步 预测 zz( 到 | 天 一 1 及 误差 的 方 状 PP 人 |E 一 1) 是 Kalman 滤波 公式 的 中 
间 结 果 。 
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2. Kalrman 注 波 公式 
由 式 (6.80) 与 16.83) 知 ,状态 的 一 步 预 测 为 


立 ( 直 [ 开 一 二 山形 | 下 一 二 工 ( 才 一 1 一 全 【6.84) 
一 步 预 测 误差 的 方差 方 
王 (时 | 下 一 1) = 有 ([ 开 一 1 起 P(E 一 1 一切 HITE 1 一 了 
十 了 (下 一 1)RI(R 一 1)7I( 二 一 】) (6.85) 


根据 中- = (3 7T(2) 3 一 1) 对 区 8) 所 做 的 最 小 方差 预测 的 误 
差 称 之 为 新 息 y (下 | 开 -1]=y(E) ,根据 式 (6.48) 有 
了 (= 一 下 [3 兴 -1] 
一 区 [有 一 后 [机 下]f 下 作 1] 一 吾 my) 
一 y() 一 届 () 区 (二 二 一] 《6.86) 
根据 最 小 方差 的 误 善 理论 ,y (&) 与 兴 -1 互 相 独 立 , 因 而 jy(A) ET 下 | 是 零 均 值 独 
立 序 列 。 
根据 式 (6.71》, 有 
KR 上 上 ) = 三 [zfR) | 其 ] 
二 五 [开锅 193 天 7 
= 五 [ 工 ( 开 ) 1 从 1 区 )] 
一 吾 [ zf) | 名 -可 十 五 [天 ) | 呈 ()] 一 位 (二 ) 


一 区 (时 [下 一 1) 十 oov[ 区 ( 开 ) 交 ( 玫 )]yarI[ 六 ( 开 )] [六 (下 ) 一 百 ( 广 (7 


= 工 ( 直 | 下 一 1]) + 天 (LE) 一 术 ( 才 ) 开 ( 开 1 天 一 1)] 《6.87) 
式 !6.87] 中 的 涉 波 增益 阵 
政 (并 ) 一 cov[ 工 (下 ) ，y( 下 )]var [ 信 (并 )] 《6.88) 


从 式 (6.87) 可 知 利用 新 息 7(A) 对 预测 值 z{ 天 | - 1) 进 行 修正 , 即 可 得 出 滤波 值 ， 
而 其 {&) 为 修正 系数 阵 。 下 面 就 来 求 基 (E) 的 实用 计算 式 。 

cov[ 袜 (下 ] 
= 王 [x( 上 有) 一 ( 下 ) [3 二) 一 瑟 ( 祁 (二 )] 


一 玉 (此 ) 一 天 (雪上 二 一 1 十 丈 ( 下 | 下 一 1 一 工 ( 帮 )][ 了 ()] 

一 [ 交 (二 | 二 一 1 十 二 (二 1 一 1)][ 胞 二)]T 一 工 ( 二 ) 吾 [六 天) 

= 五 [zz( 二 1 下 一 上 十 十 [下 | 下 一 1)] [8 开 )( 二 ) 十 本 ) 一 昌 () 并 ( 开 上 二 一 二 
一 玉 [ 字 (下 1 下 一 自 十 工 ( 下 | 下 一 1]L8( 二 ) (下 上 页 一 下 十 (二 (6.89) 


1 一 一 -一 
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考虑 到 
让 (二 | 下 一 1 一 再 (人 1 用 -1 (6.90) 


即 之 ( 才 | 夺 一 1 是 全 -1 的 线性 函数 ,此 外 zw) 与 如 -= 0302 y( 直 一 
1)) 中 的 所 有 元 素 互 相 独 立 ,因而 w(&) 也 必 独 立 于 关 -1 的 线性 函数 , 故 有 


卫 [主人 二 开 一 拉 ][atgy TI = 有 0 【6.91 ) 
又 ,okg) 与 人) 也 是 互相 独立 的 ,而 
(一 1 = 去) 一 瑟 [z( 生 ) | 人 1] 【6.92) 
故 有 
五 [ 垃 ( 虹 1 古 一 全 [zk 和 T= 《6.93) 


考虑 到 式 46.90) 与 6.92) ,还 可 以 知道 ,zf 二 一 1 与 关 - 互 相 独 立 , 因 而 它 世 与 
从 -的 线性 函数 耳 相 独立 。 由 于 z( 友 | 大 一 切 就 是 去- 的 某 个 特定 线性 函数 , 故 有 


王 [z( 1 开 -1[z 人 tl-1T=0 [6.94) 
记 
厂 ( 开 | 下 -1 = 瑟 [ 交 ( 才 | 玫 一 1 [xz 人 (ET1T=0 《6.95) 
则 有 
cov[ 区 (上 ) ,六 (二 )] 一 王 ( 开 下 开 一 划 9 开 天 ) (6.96) 
隐 
var[ y( 友 让 


一 吾 [ 3 二 》 一 呈 ( 二 》 之 (下 | 二 一 芋 并 3 下 )》 一 遇 ( 二 》 并 ( 开 | 天 一 1 
一 王 [9(E)》 葡 ( 开 1 太一 1 十 人) [BCR) z( 虹 开 一 1)+a( 下 )] 工 
= 本 (天 )P( 有 | 天 一 1)8I(E)》 十 琢 2() (6.97) 
将 式 (16.96) 《6.97) 代 人 式 (6.88) ,得 
屁 ( 二 = 卫 ( 明 1 天- 一 1BT(R 六 [ERJP(T 开 一 1)3T(8) 十 及 2(A)] 1 


(6.98) 
现在 确定 滤波 误差 的 方 关 
己 ( 直 | 页 ) 一 五 [二 (二 1 大 让 [全 《下 二 二 7] (6.99) 
考虑 到 
区 (下 | 开 ) 


一 区 ( 开 ) 一 了 (天 ) 


一 工 ( 雪 | 下 一 1) 一 政 ( 开 )[ 3 下 ) 一 三 ( 开 ) 了 (二 | 下 一 荆 ) 
一 [了 一 于 ()B( 开 让 六 ( | 玫 一 1 一 下 (下 Jo ) 《6.100) 


-- 一 - -一 - --- - - -一 -- -二 "一 ne 
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有 
书 (下 | 史 ) 
=[ 了 一 天 ( 开 )》8 下] 三 ( 二 | 下 一 [了 工 一 真人 开工 + 下 ( 下 ) 疏 订 下 下 1 玫 】 
=[ 了 一 天 (二 )8( 归 让 已 (有 | 二 一 让 一 ( 生 1 走 一 车) 克 区 直 ) 下 蕊 下) 
+ 下 (下 ) 旨 (天 ) (下 | 天 一 二) 全 (下 于 开 》 十 下 (下 ) 民 zf 二) 政工 二 ) 
=[- 大 ()8( 开 让 己 ( 二 1 二 一 下 一 无 ( 才 1 二 一 1 本 区 丰 ) 天 芳 开 ) 
十 朴 ( 开 )[ 划 (下 )P( 二 | 下 一 1)8IT() 二 下 区 开门 天 下 天 )》 (6.101) 
出 式 16,.9%9) 知 
所 (二 )[ 碌 ( 下 ) 忆 ( 二 | 下 一 1 二) 十 居民 请 )] = P( 下 | 下 一 于 IT 晴 》 
(6.102) 
将 此 式 代 人 上 式 得 
P( 雪 上 二) [了 一 天 (二 )( 二 7 有 1 下 一 1 《6.103) 


式 (6.84) 716.35)、 6.877 6.98) (6.103) 给 出 了 一 套 递 推 求 算 工 (天 | 一 1)， 
瑚 (天 | 天 一 雪 、 玫 (天 ) zt)》、P( 人 | 二) 的 公式 。 所 需要 的 数据 史 开 ,天 一 1) .7( 二 )， 
BR RICE Ra 应 由 给 定 的 系统 状态 模型 与 测量 模 弄 提供。 而 实测 数据 
打 三 [wywTCD) TYyTR 仆 则 庶 实 时 地 由 测量 仪器 提供 。 作 为 递 推 公式 , 尚 
仍 滤 波 的 初 值 字 人 | 的 与 Pi0|10) ,现在 讨论 初 值 的 选 定 问题 。 
为 解决 初 值 问题 , 先 考虑 一 下 恋 波 误差 的 均值 
及 [ 过 ( 开 1 开 )] = 吾 [(R) 一 并 ( 二 | 到 ) 
一 表 ( 开 ,二 一 1) 瑟 [ 交 ( 雪 一 1] 一 瑟 } 划 (天 十 一 二 全 (下 一 人 1 下 一 1 
十 下 ( 玫 和 瑟 (二 二 训 ) 一 划 () 开 (下 | 夫 一 1)]] 
一 贡 ( 开 ,下 一 TELzt 11 太一 巧 ] 
一 政 ( 开 1 下 (天天 一 人 下 -人 (下 一 1 一 工 ( 开 一 1 下 一 1 
[78( 雪 让 贡 ( 开 友 一 1ETz(R 一 1 一 1 106.104) 
此 式 表明 ,为 保证 二 了 朋 时 滤波 无 偏 , 即 了 [z 人 1)] =0, 就 必须 保证 过 - ] 通 时 着 
波 无 偏 , 即 五 [zz 人 一 1 并 ~1)]=0。 仿 次 类 推 ,很 显然 ,只 要 有 =0 瞬时 恋 波 值 无 
偏 , 就 可 保证 所 有 朋 时 的 滤波 无 全 。 谷 要求 初 值 无 仙 , 即 
ELzrf07-Et010] = 站 0 ( 丰 .105) 





司 了 
zt010) = 瑟 [zf0)] = 严 (和 .106) 
些 时 
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PIO 的 一 [z(0 一 呈 izf0 -并 二 有 【五 .107) 
而 天 与 忆 0 均 为 系统 状态 方程 的 已 知 条 件 。 
Kalman 滤波 公式 集中 表示 如 下 


(了 (人 | 下) 一 莹 (天 | 十 一 上) + 下 (二 )[W(R) 一 ( 下 ) 工 (于 下 一 二 
之 ( 雪 | 豆 一 划 = 红 开 | 下 一 1) (一 1 二 一 1 
疏 ( 二 )》 二 P( 二 | 二 一 TBT( 开 OK)PP( 和 | 下 一 上)OICR) 二 且 2( 开 -1 
王 ( 二 | 丰 ) = [了 工 一 开 ()D( 天 PP | 才 开 
己 ( 二 | 下 一 1 = 页 开 | 才 一 TPR 一 11 开 一 二 贡 ( 人 (天 一 是 
+T( 下 一 1)Ra(k- 19T( 二 一 1 
(6.108) 
为 了 使 用 方便 , 现 将 Kalman 滤波 公式 组 成 如 图 6.5 所 示 的 计算 框图 。 画 中 
N 为 滤波 总 步 数 。 按 照 图 6.5 所 示 的 计算 框图 编 好 计算 程序 后 ,只 要 一 个 循环 的 
计算 时 间 小 于 离散 输 人 的 时 间 间 隔 , Kalman 滤波 即 可 不 断 地 在线 地 计算 下 去 。 
易于 发 现 卫 (| 一 1 长 () 下 (| 并 不 依赖 实测 值 y() ,只 要 示 (010) 与 
PI010) 一 定 , 它 们 都 可 在 实测 值 出 现 前 计算 好 ,而 事先 将 它们 记 和 计算 机 .因此 称 
贱 初 值 区 DO 0 和 ,大 一 


用 式 (6.108) 的 第 二 个 委 式 计划 计 估 必 - 


用 式 (5.108) 的 第 吾 个 公式 计算 户 帮 上 -和 


用 式 (6108) 的 第 三 个 公式 计算 后 避 





用 式 (6.108) 的 第 -个 公式 计生 关 | 
且 式 (46108] 的 第 四 趟 公式 计算 鼎 开 | 下) 
人 


图 6.5 Kalman 沽 波 程 序 杠 赂 
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为 离线 计算 。 离 线 计算 虽 可 能 多 占用 计算 机 的 仓储 单元 ,但 它 可 明显 地 减少 在 线 
计算 的 时 间 ,而 这 对 实时 的 系统 而 言 ,是 很 有 价值 的 。 

引用 自动 控制 理论 中 结构 四 圈 的 概念 ,可 以 很 方便 地 给 出 Kalman 滤波 器 的 
结构 框图 ,如 图 6,6 所 示 。 它 形象 地 表示 了 系统 .观察 器 与 滤波 器 间 运 动 的 联系 。 






本 丸 丰 | 局 


人 1 宙 
卡 
因 二 末 
有 四 


RH 如 直 灶 1 病灶 | 一 卫 


kk 一 一 系统 一 一 一 观测 器 一 一 一 津 社 新 一 人 





图 后 .6 Kalman 斌 外 器 的 结构 框图 


例 6.2 对 某 定点 测 卡 + 次 ,得 实测 值 为 wx0) ,yy(R)。 若 每 次 测 
量 都 是 独立 进行 的 , 且 距 离 误 差 服从 正 态 分 布 Y (0,c) ,试用 Kalman 滤波 理论 估 
计 每 次 实测 后 的 臣 离 ,并 给 出 相应 的 估计 误差 的 方差 。 
解 ” 设 到 该 定点 的 上 距 离 为 ,出 
六 (上 十 1) = 并 ( 中 ) 
一 天) 十 本 (下 ] 


且 
cov[ af of 一 0 
考虑 到 选取 
zf010) = y(0) 
亦 有 


E[zto) -010)] = 王 z 一 -mt0)]=0 

仍 能 保证 无 偏 估 计 。 此 时 
P(010) = var[ -0)] = 
考虑 到 由 ( 虹 -1)=1,RitR)=0,8(E)=1, 可 得 
三 (| 下 一 1) 王 已 (下 一 1 下 一 1 
其 { 开 )》 一 三 ( 才 | 天 一 1[PR1 一 1++ 史 ]7 

甩 ( 生 1 开 )》 一 -一 其 (二 PR 下 一 1) 二 天 并 ( 开 ] 

显然 


PIL10) = 所， 反 人 ) = 广 


P(ULIID) =P(C211) = 到 o， K(C2) = 于 
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PC 12) =P(312) = 本 o?， K(3) = 于 
P(313) =P(413) = 了 
谋 有 
ftlll=ztOl0+KIILY -010)] 
= 子 [y(0) + 3 
zt212)》=zZt111) + 下 (2)J[y(2) 一 工人 (1 111)] 
= 字 [y(0) + 01) + y(2] 
zf313)] =z(212) + 开 (3)Ey(3) 一 会 (212)] 
= 寺 [y(0) + yyC2) +y(3)] 
其 实 ,就 本 例 而 言 
加 1 + 二 
三 (下 |) 一 PR TI 全 可 
-1 1L- 一 1 ,中 
一 (2 5 PRPIO 的 
故 有 
P( 下 | 开 ) = 太 T To ， 玫 (R) = 5 
而 


羡 ( 虹 | 天) 一 让 [天 一 1 克 一 1 二 下 (To 一 工 ( 开 一 1 1 二 一 1)] 
=f1- 天 (二 )] 羡 ( 开 一 11 下 一 1 十 朴 ( 开 77) 











& 1 
人 

开 1 
-| 后 (一 2 一 2) 二 + 二 (+ 二 y( 
上 一 1 
-= 二 -314-3) 1-2)] 
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= (+ 人-D+ (0)] 


仅 就 本 例 而 言 ,不 论 P4010) 取 值 多 少 , 包 插 Pt010) = ,只 要 大 一 o ,就 有 
己 ( 天 有) 一 0。 因 而 


lim 羡 ( 天 | 下放 二 灵 


也 就 是 说 ,只 要 关 足 和 够 大 ,zx 人 00) 取 任何 值 都 是 无 闫 紧要 的 。 
6.4 模型 参考 自 适 应 辨识 方法 


“模型 这 个 概念 已 广泛 用 于 自 适 应 控制 中 。 如 果 把 控制 系统 希望 达到 的 控制 
性 能 指标 用 一 个 称 作 和 参考 模型 的 理想 化 控制 系统 的 性 能 来 描述 ,并 以 zw( 丰 ) 表 示 
每 一 朋 间 实际 过 程 与 参考 模型 之 间 的 特性 差异 ,那么 根据 这 个 差异 =(A)i ,不 断 
地 修改 控制 器 的 参数 ,就 可 使 实际 系统 的 性 能 指标 尽 可 能 地 接近 参考 模型 。 这 种 
控制 思想 就 叫做 模型 参考 折 适 应 控制 ,其 基本 结构 如 图 6.7 所 未 。 


二 各 | 且 





图 6.7 模型 参考 自 适应 原理 





同样 ,“ 模 型 参考 ”的 概念 也 可 以 用 于 实时 在 线 因 识 8 . 。 这 时 ,与 模型 参考 自 
适应 控制 相反 ,被 辩 识 的 对 象 扮演 了 参考 模型 的 角色 ,如 图 6.8 所 示 。 当 可 调 模 型 
结构 已 知 时 ,根据 可 调 模型 与 参考 模型 (实际 过 程 ) 之 间 的 输出 偏差 > ( ) 进 行 适 
当 的 运算 ,通常 用 积分 或 积分 与 比例 运算 , 并 根据 运算 结果 不 断 地 修改 可 调 模 型 
的 参数 ,使 在 一 组 已 知 的 输入 作用 下 ,可 调 模 型 的 输出 尽 可 能 地 接近 参考 模型 的 输 
出 。 当 可 调 模型 与 参考 模型 之 间 的 差别 无 法 进行 改善 时 , 可 调 模型 的 参数 就 是 实 
际 过 程 参数 的 估计 值 。 

模型 参考 自 适 应 辨识 方法 ,就 其 基本 结构 来 说 ,可 分 成 并 联 . 串 并 联 和 串联 三 
种 类 型 。 这 里 只 讨论 并 联 型 的 模型 参考 法 , 亦 称 输出 误差 模型 参考 法 。 

设 实 际 系 统 可 用 如 下 模型 描述 
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商 晤 一 本 [中 站 所 让 


参数 调整 机 柯 


图 6.8 模型 参考 自 适 应 辨识 蛛 理 





有 (= 全 
各 【zx 
式 中 ,(&) 和 xf) 是 系统 的 输入 和 输出 变量 ;= 0) 是 系统 的 附加 噪声 ;, 且 





巡 ( 开 )》 一 到 [天 十 各 { 克 ) 【看 .109 ) 


六 (sw 一 Ta 二 Qu 十 二 Ca 和 
1 一 玉 | 及 十 而? 训 -十 … 十 or 《6.110) 
设 阶 次 和 和 到 已 知 ,并 置 
妃 0 一 [ed ,38 一 .1， an rpbl， 0 
生 ( 开 ) = [一 zI( 开 ) 是 区 研一 [一 g( 是 一 1 
一 入 ( 虹 一 让 (6.111) 
则 参考 模型 可 与 成 最 小 二 乘 格式 
z(R) 一 本 三 人) 十 e 人 (下 ) 《6.1121 
式 中 ,e() 为 有 色 了 噪声 ,可 表示 感 
efR) = 册 ( 之 1)P 《6.113)》 


为 了 方便 起 见 , 先 考虑 xz) =0 的 情 部。 根据 理 论 分 析 , 其 结果 也 适用 于 7( 二 ) 
夭 0 的 情况 。 

考虑 采用 如 下 的 可 调 模型 
BCz 
记 (z 
式 中 ,xz(e) 和 >,(&) 是 可 调 模 型 输 和 人 和 输出 变量 。 置 


Zi 开 》 一 (二 ) 《和 .114) 


MT rr 一 
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站 (4) = [GT(R) 六 (0p)] = [el 天 ) Go (下 六 ( 开 ) 和 ()] 
Le 一 [一 gm 页) 革 天 )] 工 一 二 一 ww 二 一 下 ， 
| 一 ( 开 -加 (二 一 va 一 和] 了 (6.115) 
并 定义 可 调 模型 的 先 验 和 后 验 广义 误差 为 
| 有 = 过 (天 ) 一 0 (二 》 6116) 
后 验 :之 (有 &)》 = s( 太 ) 一 me( 天 】 


式 中 
zt) 一休 页 ( 开 ) 
2 下》 一 六 下) 下 (下 ) = [全 () 十 本 (7)]T 丰 【下 】 (6.117) 
z0(R) 一 [看 (天 一 1)] 天 (R) 
上 式 中 , 评 人 ?和 各 人 ) 分 别 对 应 图 6.8 所 示 的 参数 调整 机 构 的 积分 和 比例 运算 
输出 。 也 就 是 说 ,图 6.8 中 的 参数 调整 机 构 选 用 如 下 运算 规则 


积分 作用 , 剑 (&) = 之 9i(efi)) + 评 (-1)= 相 (人 -1)+9(e()) 


比例 作用 : 半 (K) = (e(R)) 
综合 : 芋 (&) = 评 (&) + 梧 () 
《6.118) 
式 中 ,Pt 和 #2 是 ef 的 符 定 函数 ,pl 和 92 的 结构 将 决定 辩 识 算法 的 具体 形式 ; 
且 ee) 必须 满足 下 列 关 系 
ef 上 )= zs() + > 局 二 (有 一 5 《6,119) 
如 果 系 数 及 使 下 列 脉冲 传递 函数 
1 十 Yy， zx 
五 (=) = -  - 
二 十 之 / 多 
是 严格 正 实 的 , 即 脉冲 传递 函数 豆 (z) 的 所 有 极点 都 位 于 z 平面 的 单位 立 内 , 且 
Re[ 页 (ee)] > 0 
矿 当 > 为 实数 时 , H(z) 也 是 实数 ,那么 辨识 结果 有 (类 ) 将 保证 imzw(R) 一 0。 系 
数 8 为 待定 参数 , 它 依 天 于 系统 模型 的 真实 参数 ai。 


5 《5.120》 
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6.4.1 和 1 和 > 的 确定 
把 式 (6.117) 代 人 式 (6.116) ,并 利用 式 (6.111) 和 (6.115) ,可 得 


二 (一 一 Gd 过 mo( 天 )》 十 了 (天 ) (6.121》 
式 中 
并 一 1 
| 。 . 【6.122》 
了 (二 )》 二 一 [看 ( 开 ) 一 890] 用 ( 开 ) 
令 
2” (有 = 一 () 一 [看 ( 归 ) 一 0] 下。( 天 ) (6.123) 


并 注意 到 式 16.118) , 则 
7 《 开 )》 = [erGe(CO) +g2fefi))] +6TiRCR) 《6.124) 


一心 
式 中 
=- bo+ 素 (1 (6.125) 
间 时 将 式 (6.119) 写 臣 
e( 皮 ) 一 之 w( 皮 ) 十 有 7 这 (天 ) (6.126) 
式 中 
有 = 8 让 《6.127) 


于 是 ,并 联 型 的 模型 参考 自 适应 辨识 问题 转化 成 设计 9 和 92 ,使 下 列 以 办 天 ) 和 
efg) 为 输 人 输出 变量 的 反馈 系统 

过 mw( 开 )》 一 一 @d 过 ao 下) 十 耻 ( 才 ) 

ER) = 六 o( 开 ) 十 大 [za(R) 


7 (有 ) = 一 RE) = | 冯 TeFle(2) + gc))T+6T tk) (6.128) 


是 渐进 稳定 的 。 根 据 Popov 超 稳定 性 定理 ,如 果 及 使 得 脉冲 传递 函数 鼠 ( =) 是 严 
格 正 实 的 , 且 81! 和 2: 使 Popoy 不 等 式 成 立 , 即 


万 


> es 人 (3 才 WR 0 (6.129) 
也 就 是 
3 [ELeCD)) + 93(e(D)]+ 人 和) 之 一 必 YI 
本 【6.130) 


式 中 ,站 4 是 任意 有 上限 正常 数 ,那么 式 (6.128? 皮 馈 系 统 是 渐进 稳定 的 。 同 时 ,不 等 
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式 (6.130) 的 解 为 
feie() = [PP( 一 Re Te 
gas(R)) = [人 OH 人 (R)]TIe(R) 
式 中 ,了 (和 了 均 为 正定 对 称 阵 。 若 定义 了 (0) = 下 (常数 阵 ) , 则 上 式 写成 
人 = PN (is 人 1) 
稠 2(E( 开 ))] 一 加 (Jef 丰 ) 
上 述 分 析 表 明 , 式 低 .132) 使 得 反馈 系统 (6.128) 是 渐进 稳定 的 ,将 式 46.132) 代 人 
式 (6.118) , 则 可 调节 模 理 的 参数 可 按 下 列 趟 子 调 整 
积分 作用 ;全 (&) = 村 ( 中 一 1 + Pene( 下 )s( 到 ) 
比例 作用 : 羡 ( 开 ) = Ce(R)E() (6.133) 


综合 :看 (并 ) = 家 () + 可 () 
但 是 ,在 点 时 关 ,() 仍 无 法 计算 ,为 此 还 需要 研究 es) 的 计算 问题 。 
1.4.2 8 天 的 计算 
根据 式 46.11 纯 的 定 六 , 因 (ks) 与 后 验 广 浆 误 盖 = of ) 有 关 , 而 计算 = 需 


要 用 到 人 ), 故 在 二 时 刻 s(E) 是 无 法 计算 的 。 
仿照 式 46.119) ,定义 一 个 新 变量 


(5. 131 ) 


《6.132) 


(有 ) = 5 人 (有 十 局 二 (有 一) (6.134) 


因 先 验 广 尺 误 差 z0 () 的 计算 只 需要 评 作 一 1) , 故 在 二 时 刻 了 人) 是 可 以 计算 的 。 
比较 式 46,1197 和 (6.134) ,并 利用 式 16.116) (6.117)7 和 {16.133) ,可 得 
E0[( 下 ) 一 e( 天 ) = 之 0( 雪 ) 一 信 ( 开 )》 二 go 人 (是 )》 一 ( 天 ) 


=[ 衣 (人 ) + 可 () 一 机 (一 1 二 () 


一 真 巩 (下 儿 (有 十 轴 ) 丰 (下 )e 天 ) (6.135) 
则 
eof 开 )】 
二 一 一- 一 一 一 一 石 , 荆 3 咎 
TAO ON 060) 
式 中 


ec0f 皮 ) = x( 开 ) 一 [ 评 ( 开 一 下 )] 区。 下 )》 二 Yy， BYw(R-i (6.137) 
式 (6.136) 基 为 计算 sf8) 的 公式 - 
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1.4.3 上 如 识 算法 类 


综 王 所 述 , 并 联 模型 参考 自 适 应 A 美 算法 RMR-A(recutsive model referenca 
adaptive 引 gorithan- 上 可 归纳 为 


站 fR) 本 (地 ( 有 
朋 

从 天 一 在 :天 加 1 1) 十 本 -- 一 

荆 十 其 2 二 外 有 十 全) 下 (下 
_ 如 下 (Je0(E) 
疡 二 一 一 .一 
和 (TOO OO 

《6,138) 


名 = aoP,a 宇 -0.5 或 0 + 二 P>>0 
0(R) = xz( 有 一 [ 训 人 -TRACE + 必定 (一 站 


之 () 一 2() 一 革 民 下) 下 下) 
式 中 , 严 和 4@ 是 任意 的 正定 对 称 常数 阵 ; 系数 局 使 式 146.120) 的 脉冲 传递 函数 
ET(z) 是 严格 正 实 的 。 
上 类 辨识 算法 的 几 点 说 明 : 
() 当 卫 天 9,C@=0 时 ,算法 为 比例 积分 型 ; 当 王 =0, 允 和 0 时 ,算法 为 积分 再 。 
(2) 数据 向 量 疡 .(&) 不 含 参 考 模型 (实际 过 程 ) 的 输出 量 (大 )。 
(3) 如 果 和 妃 阵 都 是 正定 的 , 则 有 利于 输出 广 六 误差 的 收 和 化 性 ， 如 果 书 是 


正 实 的 ,而 @ 是 满足 (6.138) 第 4 式 的 负 定 阵 , 则 有 利于 参数 的 收 伐 性 。 台 + 序 忆 


>>0( 即 @+ 5 是 正定 阵 ) 是 参数 收 化 的 条 件 。 


(4) 原则 上 说 , 忆 和 刀 的 选择 是 任意 的 。 但 是 ,对 实际 问题 来 觉 , 需 要 神 具 体 
情况 综合 考虑 各 种 因素 ,最 后 选 定 严 和 马 阵 。 一 般 来 说 ,增加 已 和 @ 阵 的 值 将 有 
利于 办 识 的 收 伍 速 度 ,但 不 利于 辨识 的 精度 。 反 之 ,有 利于 因 识 的 精度 ,但 不 利于 
辨识 的 速度 。 可 见 ,P 和 @ 阵 的 大 小 对 收 敏 速度 和 辨识 精度 的 要 求 是 韦 盾 的 。 因 
此 , 严 和 中 的 具体 选择 必须 在 站 急速 度 和 精度 之 间 做 出 折 中 。 鉴 于 上 述 源 因 ,如 
果 让 忆 和 刀 阵 是 时 变 递 减 的 , 即 当 上 比较 小 时 ,了 和 怠 阵 取 值 比较 大 ,以 加 快 收 
人 敏 速度 , 随 着 上 的 增加 ,P 和 吧 阵 值 不 断 递减 ,以 保证 辨识 精度 ,这 样 就 解决 了 收 
伍 速 度 和 精度 之 间 的 矛盾 。 这 种 考虑 就 是 下 面 所 给 的 了 类 辨识 算法 。 

《5) A 类 辨识 算法 适用 于 时 变 对 和 象 ,由 于 了 一 和 @ 阵 为 常数 阵 , 因 此 算法 任何 
时 候 都 具有 较 强 的 跟踪 能 力 。B 类 辨识 算法 只 适用 于 时 不 变 对 象 ,因为 B 类 礁 识 
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算法 中 的 王 和 怒 阵 随时 间 的 推移 将 慢 慢 趋 于 零 。 然 而 ,在 有 了 上 噪声 的 情况 下 ,A 类 
辨识 算法 一 般 只 能 获得 有 偏 估计 ,而 也 类 辩 识 算法 可 获得 无 偏 估计 。 


{6.4.4 了 类 媒 识 算法 


和 类 办 识 算 法 中 三 和 中 改 用 时 变 算 由 后 的 算法 就 是 并 联 型 的 模型 参考 自 适 
应 也 类 辨识 算法 RMR-BUrecursjve model reference adaptive algorithm-B》 
[( 开 ) = 站 (ET) + 8 人) 
叫 ( 开 一 1) 下 (并 )ECCE) 
1 + 大 轴 (下 )[E( 开 一 1) 十 妇 ( 和 一 1] 丰 人) 
他 (二 一 1 下 (下 )e0( 天 ) 
工 二 在 国 ( 开 有 [P( 天 一 1) 十 介 ( 人 一 1]P() 
下 (二 一 工 ) 丰 (天 ) 丰 工 ( 开 )P( 天 一 |) 
[十 下 下 ( 克 ) 王 (二 一 二) 天 (到 ) 


丰 () = 你 (有 -1) + 





从 2(R) 一 


王 ( 开 ) 二 五 ( 开 一 二 十 ,PPO) > 0 


人 三 oa x 一 有 . 
e0(A) = =( 有 ) 一 [入 ( 有 一 TDJTRo 人 有) 十 了) 忆 二 (有 一 让 


之 (一 &( 开 ) 一 站 (天 ) 天 oo( 天 ) 
(6.139) 

式 中 ,系数 房 使 式 (6.120) 的 脉冲 传递 函数 歼 (z) 是 严格 正 实 的 。 

B 类 辨识 算法 的 斤 点 说 明 : 

(1) 采用 了 类 算法 ,输出 后 验 广义 误 盖 =。(&) 玉 参数 估计 值 节 (RE) 是 一 致 收 敏 
的 , 即 

疏 &n(R) = 站 
《6.140) 
Lim BE)=0 

(2) 当 a 之 -0.5 时 ,算法 为 比例 积分 型 ; 当 e=0 时 ,算法 为 积分 型 。 

(3) ax 取 负 值 { ~ 0.5ssae<0) 和 将 有 利于 参数 的 收 误 性;a 取 正 值 则 有 利于 输出 
广义 误差 的 收 敏 性 。w 取 值 越 大 ,参数 估计 值 的 收 敏 速度 越 慢 。 


6.4.5 民 类 辨识 算法 


不 论 A 关 还 是 了 类 因 识 算法 都 需要 确定 系数 A， 使 式 (6.120) 的 脉冲 传递 函 
数 HH( =) 是 严格 正 实 的 。 系 数 A 的 选择 直接 依赖 于 系统 模型 的 真实 参数 wm 。 然 
而 ,外 于 参数 。 本身 是 未 知 的 ,因此 和 A 类 和 了 类 辨识 算法 在 系数 8 的 选择 问题 上 
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将 遇 到 困难 。 这 就 引出 了 C 类 辩 识 算法 。 
定义 一 个 增 维 的 可 调 向 量 
人 (4) = [全 (下 ) 让) 
一 [ar( 呈 ) Ca (天 ) (本 启 (E) 7 房 (E)】 【6.141) 
和 一 个 增 维 的 数据 癌 量 
大 (天 》 一 [站 站 7 下) 一 到 号 ( 天 7 
=[ 一 zs( 才 一 一 (一 一 1 
&( 归 一季) 一 过 (二 一 1 一] 《6.142) 
这 意味 着 把 系数 和 也 看 做 辩 识 参 数 。 同 时 , 式 16.126) 和 (6.134) 分 别 用 下 列 式 子 
代替 


人 = 这 ( 开 ) 十 记 [( 开 ) 翅 (天 ) 
(1.1431) 


e0( 有 ) 天 0 (二 ) 二 [ 床 ( 开 一 1) 过 o( 上 ) 
式 中 
记 ) = 新 (E) + 天 () 
之 加 (下 》 一 宛 (天 )》 一 站 天 ( 开 ) 用 (天 ) 《6.144) 
过 0 () = (有 ) 一 [( 才 1] 站。 大 ) 


式 中 ,六 (和 六 (分 别 对 应 于 积分 和 比例 运算 的 结果 。 
和 经 上 述 增 维 处 理 后 ,C 类 辩 识 算法 RMR-C 可 直接 从 也 类 办 识 算法 导出 
6r(8) = 部 () + 全 () 
， 瑟 { 二 一切 及， (二 Je0( 开 ) 
革 二 开工 ( 帮 并 五 (二 一 1 二 站 (有 一 1)] 丙 (二 ) 
部 ( 雪 一 1 天 (天 )E0( 雪 ) 
1 + 天 (二 江天 (有 一 1) + 而 (一 1] 天 人 (》 
五 (有 一 1) 下 (天 ) 肠 二 ( 瑟 ) 王 (二 一 革 
1 十 下 (天 ) 五 (天 一 1 天。 (CR) 
0G(06) = 唔 (4),a2-0.5 
eo( 开 ) 一 xz() 一 [( 一 1)]TFs( 关 ) + [新 (R 一 1)] 过 人) 
当然 ,C 类 辩 识 算法 也 可 从 A 类 辨识 算法 导出 ,算法 的 形式 雷同 于 A 类 算法 
增 维 后 的 结果 。 


针 () = 喜 ( 一 1 


( 担 .145) 





全 (二 ) = 


,五 (0) > 0 





五 (8) = 五 (有 -1) + 
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最 后 斋 要 提醒 注意 ,模型 参考 自 适 应 辨识 算法 中 所 用 的 数据 向 量 包 ,() 或 
Po 天) 的 不 含 实际 系统 的 输出 = 0) ,这 一 点 和 以 前 介绍 过 的 办 识 算法 是 不 一 样 
的 。 另 外 ,虽然 上 述 三 类 辨识 算法 都 是 在 无 噪声 的 情况 下 推导 出 来 的 ,然而 它们 也 
适用 于 右 噪 声 的 情况 。 对 不 同 的 噪声 类 型 ,它们 的 收敛 性 质 是 不 同 的 。 


6.5 小 结 


Bayes 办 识 方 法 的 基本 思想 是 把 所 训 佑 计 的 参数 看 做 随机 变量 ,然后 设法 通 
过 观测 与 该 参数 有 关联 的 其 他 变 基 ,以 此 来 推断 这 个 参数 。 

要 大 后 验 参 数 估 计 与 极 大 似 然 居 计 有 着 密切 的 联系 ,而 出 发 点 又 不 一 样 。 极 
大 似 然 佑 计 立 足 于 直接 极 大 化 数据 的 条 件 概 率 密度 函数 , 极 大 后 验 参 数 估计 则 是 
基于 极 大 化 参数 的 后 验 概 率 密度 函数 。 

条 件 期 望 参 数 估 计 直 接 以 参数 的 条 件数 学 期 望 作为 参数 的 估计 值 , 它 等 价 于 
极 小 化 参数 估计 误差 的 方差 。 不 管 参数 8 的 后 验 概率 密度 函数 取 什 么 形式 ,条 件 
期 户 参 数 估 计 总 是 无 坊 一 致 估计 。 但 在 一 般 情 况 下 ,条件 期 望 参数 估计 工程 上 是 
难以 应 有 町 的 。 

Hayes 参数 辨识 算法 与 最 小 二 乘 递 推算 法 类 似 。 在 假设 正 态 分 布 的 前 所 下 ， 
Bayes 估计 和 Markov 估计 是 一 致 的 。 它 相当 于 加 权 最 小 二 乘法 中 的 加 权 因 子 取 
人 (一 17 0 。 

Kalman 让 波 器 是 一 种 经 典 的 Bayes 结构。 它 具 有 学 习 功 能 ,或 者 说 ,可 以 根 
据 所 得 调 量 数据 做 出 必要 的 决策 ,以 调整 滤波 程序 .使 之 适应 系统 或 环境 的 变化 ， 
从 而 得 到 接近 最 优 的 状态 估计 。Kalman 滤波 公式 实际 上 就 是 一 套 递 推 线性 证 波 
公式 。 它 的 出 发 点 是 给 定 的 *(010) 与 P(010) ,而 每 实测 出 一 个 光 CA) ,该 递 推 公式 
即 能 利用 前 一 瞬时 的 滤波 结果 YY( 直 一 1| 直 一 1 与 一 1| 一 1) 计 算出 点 瞬时 的 
交 ( 开 |) 与 瑟 ( 二)。 一 步 预测 二 (| 一 1 及 其 误 善 的 方 芜 王 人 | 一 切 是 Kalman 
滤波 公式 的 中 间 结 果 ， 

模型 参考 自 适 应 控制 的 思想 就 是 ,把 控制 系统 希望 达到 的 控制 性 能 指标 用 一 
个 称 作 参考 异型 的 理想 化 控制 系统 的 性 能 来 描述 ,并 根据 每 一 瞬间 实际 系统 与 参 
考 模型 之 慰 的 特性 差异 ,不断 地 修改 控制 器 的 参数 ,使 实际 系统 的 性 能 指标 尽 可 能 
地 接近 参考 模型 。 


习 题 


1. 简 述 Byes 辩 识 的 基本 厚 理 。 
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Im -上 《0 下 


. 分 析 极 大 后 验 参 数 估计 方法 与 条 件 期 望 参 数 佑 讨 方法 之 问 的 内 在 联系 。 

, 辨别 预测 滤波 与 平滑 三 个 概念 , 简 述 Kalman 滤波 的 步骤 。 

, 什么 是 模型 参考 自 适应 控制 ? 

, 沽 虑 区 3.6 所 示 的 仿真 对 象 , 图 中 ,w(8) 是 服从 4(0,1) 分 布 的 不 相关 随机 品 


声 。 且 
CGIz-) = Bf(zAA(z D，NOz 1) = 了 Dz DAC(z 
上 fs- 旨 一 1 一 1.Saiz-1+0.7z2 一 Clfzx 瑟 
je = 1.0z-L +0D.Sz 
Dfz- 昌 =1=-z+0.2x 一 
若 仿 真 对 象 选择 如 于 的 模型 纤 构 
芯 (下 二 QIS2( 开 一 1)》+ azf 开 一 了 ) 
一 站 1 下 一直 十 op 一 2 十 证 下 Ta 一 1)+couf 一 2) 
试用 Bayes 辨识 算法 求 出 上 述 模型 的 参数 ， 
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对 于 参数 易 变 的 非 线 性 复杂 系统 的 模型 辨识 ,前 面 讨 论 的 古典 办 识 方法 和 现 
代 辩 识 方法 显得 无 能 为 力 ,而 神经 元 网 络 则 可 以 对 这 类 系统 进行 办 识 。 因 此 ,本 章 
讨论 神经 网 络 模型 辨识 问题 。7.1 一 7.3 节 介绍 神经 网 络 因 识 的 基本 概念 .神经 网 
络 模型 辩 识 中 常用 结构 .以 及 辨识 中 带 用 8 网 络 训练 算 法 等 。BP 算法 在 系统 辩 
识 中 得 到 了 最 广泛 的 应 用 ,但 一 般 BP 网 络 训练 时 会 出 现 很 多 问题 ,诸如 不 收 伍 、 
训练 速度 慢 或 精度 不 高 等 。 因 此 ,7.4 节 讨 论 改 进 的 BP 网 络 训练 算法 ,其 中 包括 
四 种 改进 算法 及 其 他 的 网 络 训练 技巧 。7.5 节 是 神经 网 络 辩 识 的 MATLAB 仿真 
举例 ,其 中 包括 对 开发 的 具有 了 噪声 二 阶 系统 办 识 的 MATLAB 程序 削 析 .对 铬 维 非 
线性 辨识 的 MATLAB 程序 剖析 。7.6 和 ?7.7 节 分 别 讨论 基于 改进 得 传 算法 的 神 
经 网 络 和 模 焰 神 经 网 络 (FNN) ,并 列举 遗传 神经 解 耦 仿真 及 实验 结果 ,对 开发 的 
FNN 非 线 性 多 变量 系统 的 MATLAB 解 看 仿真 程序 进行 剖析 。 


7.1 神经 网 络 概念 与 特性 


神经 元 网 络 是 智能 控制 技术 的 三 大 组 成 部 分 (神经 网 络 . 模 贿 控 制 和 专家 系 
统 ) 之 一 。 人 工 神经 元 是 专家 根据 生物 神经 元 特点 在 工程 上 的 应 用 研究 发 展 起 来 
的 , 它 是 神经 网 络 的 基本 处 理 单 元 。 不 同类 型 的 神经 网 络 有 各 自 的 激发 函数 和 学 
习 方 法 。 由 于 神经 网 络 对 非 线 性 具有 较 强 的 跟踪 或 自 适 应 能 力 , 因 此 ,神经 元 网 络 
作为 一 种 新 技术 引起 了 人 们 的 巨大 兴趣 ,并 越 来 越 多 地 用 于 辨识 和 控制 领域 。 


7.1.1 人工 神经 元 模型 


人 工 神 经 元 是 神经 网 络 的 基本 处 理 单元 ,是 对 生物 神经 元 的 简化 和 模拟 。 图 
7.1 表示 了 一 种 简化 的 神经 元 结构 。 从 图 下 见 , 它 是 一 个 多 输 人 . 单 输出 的 非 线 性 
元 件 ,其 输 人 输出 关系 可 措 述 为 
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| 一 2 人 
3 三 大 感 
式 中 ,zi 必 =1,2, ,2) 是 风 其 他 细胞 传 来 的 输入 信 导 ,6 为 赣 值 , 权 系 数 ww 表示 
连接 的 强度 ,说 明 帘 触 的 负载 。Fz) 称 为 激发 困 数 或 作用 画 数 ,其 非 线 性 特性 可 
用 遍 值 型 .分 段 线性 型 和 连续 型 激发 卫 数 近似 。 

为 了 方便 ,有 时 将 -4 也 在 成 是 对 应 恒 等 于 工 的 输入 za 的 权 值 ,这 时 陈 4S.1) 
的 和 式 变 成 


《1 ) 


IT = > mw (7.2] 
式 中 ,un= - 6;ze= 1 和 
7.1.2 激发 函数 
常用 前 激发 孜 数 如 图 7.2 所 示 。 图 中 (a) 和 (人 b) 为 国 值 型 函数 :ec) 为 侈 和 型 项 


了 
数 ;(d) 是 双 曲 名 函 妆 或 称 为 对 称 的 sigmoid 冰 数 Ar) = tanh(z)= Ti (ej 是 





sigmoid 函数 1(z) = 一 -万 ,通常 情况 下 8 取 1 (1 是 高 斯 函数 /(z) = 





-2 
exp| 号 |,- 是 高 斯 函数 中 心 值 ,c 为 0 时 ,函数 以 纵 轴 为 对 称 轴 .8 是 高 斯 了 


六 
数 尺度 因子 ,5 确定 高 斯 函数 的 宽度 。 
Ai 





图 7.2 激发 师 数 
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7.1.3 神经 网 络 模型 分 类 


神经 网 络 是 由 大 量 神 经 元 广泛 连接 成 的 网 络 。 根 据 连接 方式 的 不 同 . 神 经 罗 
络 可 以 分 为 两 大 类 :无 反馈 的 前 向 网 络 和 相互 连接 型 网 络 (包括 反 馈 网 络 ), 如 图 
7.3 所 示 。 前 向 网 络 有 输入 层 、 隐 含 层 (简称 隐 层 也 称 中 间 层 ) 和 输出 层 , 隐 层 可 以 
有 若干 层 ,每 一 层 的 神经 元 只 接受 前 一 层 补 经 元 的 输出 。 而 相互 连接 型 网 络 的 神 
经 元 相互 之 问 都 可 能 有 连接 ,因此 , 输 人 信和 号 要 在 神经 元 之 间 反 复 往 返 传 递 ,从 某 
一 初 态 开始 ,经 过 若干 次 的 变化 ,渐渐 趋 于 基 一 稳定 状态 或 进 人 周期 振 比 等 其 他 
状态 。 








他 反 镇 型 神经 网 络 结构 


图 7.3 两 种 不 同 连接 方式 的 网 络 


迄今 为 止 , 约 有 40 种 神经 网 络 模型 ,其 中 有 代表 性 的 是 : 

具有 反 向 传播 BP(back propasation》 的 网 络 ; 径 向 基 男 数 RBF(radial basis 
funcetionJyGMDFIthe group method of data hanqdling) 网 络 ;感知 器 ;COG(Cohen 和 
Gessberg 提出 的 反馈 网 络 模型 ) 网 络 ; 盒 中 脑 (BSB) 模 型; Hopfield 神经 网 络 : 
BCM(Boltzman machinexCauchy machine) 网 络 ; counter propagaticnfCCPIN) Miada- 
line 网 络 ; 自 适 应 共振 理论 (ART) , 它 包括 ART1 和 ART2; 雪 舱 网 络 ; 双 铝 联想 记 
忆 {BAYMD ; 学 习 托 阵 1LRN) ;神经 认识 机 ; 自 组 织 且 射 (SOM) ;细胞 神经 网 络 
《CNID)i; 交 蔡 投影 神经 网 络 (APNN)i 小 脑 模型 (CMAC) 等 。 从 信息 传递 的 规律 
来 看 ,这 些 已 有 的 神经 网 络 可 以 分 成 三 大 类 : 即 前 向 网 络 (feedforward NN) ,反馈 
网 络 {ieedback NN) 和 自 组 织 网 络 (self-organizing NN)。 和 常用 的 BP 网 络 是 一 种 具 
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有 上 反 向 传播 的 前 向 网 络 。 
7.1.4 神经 网 络 学 习 方 法 
1 学习 方 泪 的 种 类 


神经 网 络 学习 方 法 有 密 种 。 若 按 学 习 规 刚 , 网 络 的 学 习 可 分 为 三 类 ;相关 规 
则 , 即 仅仅 根据 连接 间 的 油条 水 平 改变 权 值 ; 纠 错 规则 , 即 依赖 于 输出 节点 的 外 部 
反馈 来 改变 权 系 数 ;无 教师 学 习 规 则 , 即 学 习 表 现 为 自 适 应 于 输 和 人 空间 的 检测 
规则 。 
1) 相关 规则 
相关 规则 常用 于 自 联 想 山 络 ,执行 特殊 记忆 状态 的 死记 式 学 习 , 也 属于 无 教师 
的 学 习 。Hopfied 网 络 就 是 如 此 ,所 采用 的 是 修正 的 Hebb 规则 。 
2) 细 错 规则 
从 方法 上 等 交 于 梯度 干 降 法 ,通过 在 局 部 最 天 改善 的 方向 上 逐步 地 进行 修正 ， 
为 图 达到 表示 函数 功能 的 全 局 解 。 感 知 器 就 使 用 纠 错 规则 : 忠 若 一 节点 的 输出 正 
歼 ,一 切 不 变 ;@ 四 若 输出 本 应 为 0 而 为 1, 则 相应 的 权 值 减 小 ;号 者 输出 应 为 1 而 为 
昌 , 则 权 值 增加 。 
对 于 人 G 学习 规则 ,可 分 为 一 般 人 规则 和 广义 他 规 则 , 常 弯 的 有 以 下 3 了 种。 
(1) 3 学 习 规 则 。 它 优 于 感 产 朵 学 习 , 轩 为 A 多 不 是 固定 的 量 而 与 误 善 成正 
此 , 即 
各 贱 = 耻 宙 信 (7 了 .3) 
式 中 ,7 是 全 局 控制 系数 ,而 贞 = 妆 一 Vi, 即 期 望 值 和 实际 值 之 差 。 
人 学习 规则 和 感知 器 学 习 规 则 一 样 只 适用 于 钱 性 可 分 阴 数 ,无 法 用 于 狗 层 网 
络 。 
(2) 广 风 了 规则 。 它 可 在 多 网 络 上 有 效 地 学 习 , 其 关键 是 对 谭 节 点 的 偏差 9 
如 何 定义 和 计算 。 对 BP 算 法 , 当 ;i 为 隐 节 点 时 , 定 多 
8 = Faet)x 0 (7.4) 
起 中 , W 是 节点 站 到 上 一 层 节 点 二 的 权 值 ; 六- ) 为 连续 的 一 次 可 徽 郑 数 ,将 某 一 
隐 节 点 外 人 上 一 层 节 点 的 误差 的 比例 总 和 (加 权 和 ) 作 为 该 隐 节 点 的 误差 ,通过 可 
观察 到 的 输出 节点 的 误差 ,二 一 层 隐 节点 的 误差 怠 能 说 归 得 到。 广义 的 人 规则 可 
学 习 非 线性 可 分 函数 。 
(3) Boltzmann 机 学 习 规 则 。 它 是 基于 模拟 的 统计 方法 来 代替 广义 的 1 规则 。 
它 提供 了 隐 市 点 的 有 效 学 习 方 法 ,能 学 习 复 灯 的 非 线 性 可 分 函数 ， 其 主要 缺点 是 
学 习 速 度 杰 旬 。 它 基本 是 梯 度 直 峰 法 。 
由 此 可 网 , 纠 铺 才 则 基于 梯度 于 降 法 ,因此 不 能 保证 得 到 全 局 最 优 解 ;同时 要 
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求 大 量 的 训练 样本 , 因 而 收缩 速度 介 ; 纠 错 规 则 对 样本 的 表示 次 序 变 化 比较 敏感 ， 
这 就 像 教 师 必 须 认 真 备 课 ,精心 组 织 才能 有 效 地 学 习 。 

3) 无 教师 学 习 规 则 

在 这 种 学 习 规 则 中 ,关键 不 在 于 实际 节点 的 输出 怎样 与 外 部 的 期 望 输出 相 一 
致 ,而 在 于 调整 参数 以 反映 观测 事件 的 分 布 。 诸 如 自 适应 共振 理论 (ART)、 目 组 
织 特征 机 射 和 Klorf 的 吝 乐 主 交 神经 元 都 是 无 教师 学 习 。 

这 类 无 教师 学 习 的 系统 并 不 在 于 寻找 一 个 特殊 函数 表示 ,而 是 将 事件 空间 分 
类 成 输 人 活动 区 域 , 且 有 选择 的 对 这 些 区 域 响 应 。 它 在 应 用 于 开发 由 多 层 疯 争 族 
组 成 的 网 络 等 方 而 有 和 良好 的 前 景 。 它 的 输 人 可 以 是 连续 值 ,对 响声 有 较 强 的 抗 干 
扰 能 力 ,但 对 较 少 的 输入 样本 ,结果 可 能 依 束 于 输入 顺序 。 

在 人 工 神 经 网 络 中 ,学 习 规则 是 修正 网 络 权 值 的 一 种 算法 ,以 获得 合适 的 映射 
函数 或 其 他 系统 性 能 ，Hebb 学 习 规 则 的 相关 很 设 是 许多 规则 的 基础 , 龙 其 是 相关 
规则 ;Hopfied 网 络 和 自 组 织 特征 映射 展示 了 有 效 的 模式 识别 能 力 ; 纠 错 规则 册 使 
用 梯度 下 降 法 ,因而 存在 局 部 极 小 点 问题 。 无 教师 学 习 提 供 了 新 的 选择 , 它 利用 自 
适应 学 习 方 法 ,使 节点 有 选择 地 接收 输 和 人 空间 上 的 不 同 特性 ,从 而 抛弃 了 普通 神经 
网 络 学 习 映射 函数 的 学 习 概 念 ,并 提供 了 基于 检测 特性 空间 的 活动 规律 的 性 能 描 
写 。 下 面 介 绍 交 种 常用 的 学 习 方 法。 


2. 常用 神经 网 络 的 学 避 方 法 


1) Hebhb 学 习 方 法 
基于 对 生理 学 和 心理 学 欧 长 期 研究 ,D,O.Hebb 提出 了 生物 神经 元 学 , 即 当 两 
个 神经 同时 处 于 兴奋 状态 时 ,它们 之 间 的 连接 应 当 加 强 。 这 一 候 设 可 描述 三 
zi 二 十 二 二 of) 十 了 [7.5S) 
式 中 ,ui( 开 ) 为 连接 从 神经 元 ; 到 神经 元 7 的 当前 权 值 ; 开 , 了 为 神经 元 ; ,7 的 激活 
水 平 。 
Hebb 学 习 方 法 是 一 种 无 教师 的 学 习 方法 , 它 只 根据 神经 元 连接 间 的 激活 水 平 
改变 权 值 , 因 此 这 种 方法 亦 称 为 相关 规则 。 
当 神 经 元 由 式 (7.1) 描 述 时 , 即 
太 三 zi 一 此 (了 .5)》 


= 扰 二 三 17[1 二 exPBt 一 厂 ) . 
周 Hebb 学 习 方 法 改写 成 
Ti 下 十 一 人 下 ) 十 乱入 (了 .7 
另外 ,根据 神经 元 状态 变化 来 调整 权 值 的 Hebb 学 习 方 法 称 为 微分 Hebb 学 习 
方法 ,可 描述 为 
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TD 有 开 十 1 二 TiC 开 ) 十 [3 一 站 (一 1 下 CR) 一 WE 一 1 (7.8) 
2) 梯度 下 人 由 革 
梯度 下 降 法 是 一 种 有 教师 信号 的 学 习 。 假 设 下 列 准 则 示 数 


JW) = 六 e(W 8D2 = 了 [Y(D) 一 豆 (WP (7.9) 


式 中 ,Y( 我 表 看 望 的 输出 立 ( 研 ) 为 期 望 的 实际 输出 ; 凡 是 所 有 权 值 组 成 的 


向 量 ;e( 本 ,) 为 广 环 ,对 了 () 的 偏差 。 现 在 的 问题 是 如 何 调整 环 使 准则 范 
数 最 小 。 梯 度 下 降 法 (gradient decline method) 可 用 来 解决 此 问题 ,其 基本 扎 想 是 
沿 着 大 王 ?的 负 梯 度 方向 不 断 修正 玫 () 值 ,直至 J 风 ) 达 到 最 小 。 这 种 方法 的 
数学 表达 式 为 





用 +1T) = (CD ye 人 -2 (7.10) 
本 = 用 人 有 
式 中 ,2 是 控制 术 昔 入 正 速 度 的 变量 。 太 鱼 ) 的 梯度 为 
37( 惠 ) 9 也 ( 你 ,) 
3 全 ww 多 克 日 格 是 = 评 ( 肥 ) (7 


在 上 述 问 题 中 ,把 网 络 的 输出 看 成 是 网 络 权 值 向 量 克 的 郴 数 , 因 此 网 络 的 学 习 束 
是 根据 硕 刻 的 输出 和 实际 之 间 的 误差 平方 最 小 原则 来 修正 网 络 的 权 同 量 。 根 据 不 


同形 式 的 立 ( 克 ,) ,可 推导 出 梧 应 的 算法 :6 规则 和 BP 算法 。 
3) PetafS) 规 则 
在 日.Widrow 的 自 适 应 线性 元 件 中 ,自得 应 线性 元 件 的 输出 表示 为 


六 全 ,= 本 T 克 (下 ) 《7.12) 
式 中 , 琴 = (zol )TI 为 权 值 向 是; 天 人才 )=(zpyri yzoI(R) 为 天 时 刻 
的 输 人 模式 。 
因此 淮 贴 将 数 . 乒 研 ) 的 梯度 为 
3J( 本) E 3 允 (人 贱 居 )| 
3 铬 |w-wa 多 9 钙 | E( 阳 居 ) 其 () 玫 = wb 


当 PR)=eX 生 位 时 , 则 有 Widrow 的 汪 规 则 为 


研 1 二 1) = 研 ( 才 )》 二 ef 友 ( 归 ) 天) 辟 ( 才 (7,.13) 


和 素 ( 天 ) 人 2 
式 中 ,a 是 控制 算法 和 收缩 性 的 常数 ,实际 中 往往 取 0.1< as<1.0。 
为 了 便于 计算 ,$ 规则 可 以 表示 成 下 面 形 式 
钱 ( 才 +1) 三 全 ( 人 二) + 人 EC 作 ( 虹 ) 天) 大 ( 开 ) 7.14]) 
或 


”一 一 一 人 
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栈 ( 虹 十 和 二 页 《十 有 1 一 外 了 人 其 二 (人 1) 
(7 了 .15] 
式 中 ,7 了 常 取 0.0I< 生 ?7S10.0,e 取 0.9。 
4) BP 算法 
澡 差 反 向 传播 的 卫 算法 {back-propagation algorithm ,简称 为 BP 算法 ) , 早 在 
1974 年 Webos 在 他 的 论文 中 提出 一 种 BP 学 习 理 论 ,到 198S 年 发 展 了 BP 网 络 训 
练 算法 。BP 网 络 不 公有 输 人 层 结 点 .输出 层 节 点 ,而 上 征 有 隐 层 节点 (可 以 是 一 层 或 
多 层 )}。 其 作用 函数 通 带 选用 连续 可 导 的 Sigmoid 函数 
Fe) 一 TIL+exp( 一 全) (7 了 .16) 
在 系统 辨识 中 常用 的 是 一 种 典型 的 稳 层 并 行 网 , 即 多 层 BP 网 。 这 是 一 种 正 向 的 、 
各 层 相 互 全 连接 的 网 络 。 对 于 输入 信和 号 要 经 过 输 人 层 , 向 前 传递 给 降 层 节点 。 经 
过 激发 (作用 } 函 数 后 ,把 隐 层 节点 的 输出 传递 到 输出 节点 ,再 经 过 激发 函数 后 才 给 
出 输出 结果 。 如 果 输 出 层 得 不 到 期 望 的 输出 , 则 转 人 反 向 传播 ,将 误差 信号 沿 原来 
的 连接 通路 返回 。 通 过 修改 各 层 神经 网 络 的 权 值 ,使 过 程 的 输出 7 和 神经 网 络 横 
型 的 输出 ww 之 间 的 误差 售 导 最 小 为 止 。BP 算法 是 梯度 下 距 法 的 改进 算法 ,在 
7.3.2 中 讨论 BP 网 络 时 展开 讨论 。 
5) 竟 争 式 学 习 
竞争 式 学 习 属 于 无 教师 学 习 方 式 。 这 种 学 习 方 式 是 利用 不 同 层 间 的 神经 元 发 
生 兴 奋 性 连接 ,以 及 同一 层 内 距离 很 近 的 神经 元 间 发 生 同 样 的 兴奋 性 连接 ,而 虐 离 
较 远 的 神经 元 产生 抑制 性 连接 。 在 这 种 连接 机 制 中 引 人 竟 争 机 制 的 学 习 方 式 称 为 
竞争 式 学 习 。 其 本 质 在 于 神经 元 网 络 中 高 层次 的 神经 元 对 低层 次 的 神经 元 的 输入 
模式 进行 识别 。 竞 争 式 机 制 的 恩 想 源 于 人 的 大 脑 的 自 组 织 能 力 , 所 以 将 这 神经 网 
绑 称 为 自 组 织 神经 网 络 [ 自 适应 共振 网 络 模型 (adaptive resonance theory,ART)j]。 


自 级 织 神经 网 络 要 求 识别 与 输入 最 匹配 的 节点 ,定义 距离 忆 = 之 (5 一 an 六 为 
接近 上 离 测度 ,具有 最 短 距 离 的 节点 选 作 胜 者 。 它 的 权 值 向 量 经 修正 Aw， = 
【人 一 TENiArz 0 锯 - ,使 该 节点 对 输 人 更 敏感 ,其 中 人 是 六 个 输 
人 变量 中 虑 离 半径 较 小 或 接近 于 0 的 部 分 。 


7.1.5 神经 元 网 结 特点 


神经 元 网 络 作为 一 种 新 技术 迅速 发 展 ,并 越 来 越 多 地 用 于 复杂 系统 的 瓣 识 和 
控制 领域 ,是 因为 与 人 六 的 状 闪 和 各 利 入 不 宁 多， 神经 网 络 具 有 以 下 主要 特性 : 

1) 非 线 性 特性 

神经 元 网 络 在 理论 上 可 以 趋 近 任何 非 线性 的 蜗 射 。 对 于 非 线性 复杂 系统 的 建 
模 .预测 ,神经 元 网 络 比 其 他 方法 更 实用 与 经 济 。 
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2) 平行 分 布 处 理 

神经 网 络 具有 高 度 平行 的 结构 , 这 使 其 本 身 可 平行 实现 。 故 较 其 他 常规 方法 
有 更 大 程度 的 容错 能 力 。 

3) 硬件 实现 

神经 网 络 不 仅 可 以 平行 实现 ,而 且 一 些 制造 广 家 已 经 用 专用 的 VLSI 往 件 来 
制作 神经 阅 络 。 

4) 学 习 和 自 适 应 性 

利用 系统 实际 统计 数据 ,可 以 对 网 络 进行 训练 。 受 适当 训练 的 网 络 有 能 力 泛 
化 , 即 当 输入 出 现 训 练 中 未 提供 的 数据 时 ,网络 也 有 能 力 进 行 辨 识 。 神 经 网 络 还 可 
以 在 线 训练 。 

5) 数据 融合 

网 络 可 以 同时 对 定性 定量 的 数据 进行 操作 ,在 这 方面 ,网 络 正好 是 传统 工程 
(定量 数据 ) 和 人 工 智 能 领域 (符号 数据 ) 信 息 处 理 技术 之 间 的 桥梁 。 

6) 多 变量 系统 

神经 网 络 能 处 理 多 输入 信和 肝 , 且 可 以 具有 歼 个 输出 , 故 适 用 于 狗 变 量 系统 。 从 
辨识 和 控制 理论 观点 来 看 ,神经 网 络 处 理 非 线 性 的 能 力 是 最 有 意义 的 。 


7.2 神经 网 络 模型 辩 识 中 常用 结构 


模型 辨识 中 有 正 向 建 模 和 着 回 建 模 的 结构 , 正 向 建 模 中 分 为 串 - 并 辨识 的 结构 
及 并 联 辩 识 结构 ;逆向 建 模 又 分 为 直接 道 向 辨识 结构 和 特殊 逆向 辨识 结构 。 为 了 
在 模型 辨识 中 能 选 准 结构 , 下面 分 析 它 们 各 自 的 优 缺 点 。 

系统 辩 识 中 一 个 重要 问题 是 系统 的 可 辨识 件 , 即 给 定 一 个 特殊 的 模型 结 罗 ,被 
辨识 的 系统 是 否 可 以 在 该 结 狗 内 适当 地 被 表示 出 来 。 因 此 ,必须 预先 给 予 假 设 ( 如 
果 采 用 神经 网 络 方法 对 系统 进行 辨识 时 》 为 即 所 有 被 研究 的 系统 都 属于 所 选 神经 网 
络 可 以 表示 的 一 类 里 ,根据 这 个 急 设 ,对 问 样 的 初始 条 件 和 任何 特定 输 人 ,模型 和 
系统 应 产生 同样 的 和 输出。 因此, 振 识 的 系统 就 是 根据 模型 系统 过 程 的 输出 误差 , 利 
用 阿 络 的 算法 调节 神经 元 网 络 的 参数 。 直 到 模型 参数 收 伍 到 它们 的 期 望 值 。 如 妇 
神经 元 网 络 训练 过 程 要 表示 系统 正 疝 动态 ,这 种 建 模 方 法 就 叫做 正 向 辩 识 建 模 。 
其 结构 图 如 玫 7.4 所 示 。 图 中 TDL 代表 具有 抽 头 的 延 时 线 , 昼 经 元 网 络 与 过 程 巴 
行 , 系统 与 神经 网 络 的 预 佑 误差 用 作 网 络 的 训练 信号 ,这 种 结构 也 称 为 串 - 并 辨识 
模型 。 学 习 的 方法 是 有 监督 的 ,教师 信号 ( 即 系统 的 输出 ) 直 接 向 神经 网 络 提供 目 
标 值 ,通过 网 络 将 预 佑 误差 直接 反 传 进行 训练 。 假 定 被 辨识 系统 具有 形式 


3 下 十 1 = 天 yo[ 虹 Jp 下 一 二 of 一 王 十 了 
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下 (一 1 一 二 1] (7.17) 





留 7.4 正 问 建 模 ( 审 -并 辨识 ) 结 构图 


式 (7.17} 是 非 线 性 的 离散 时 人 间 差 分 方程 ,w+ 巧 代 表 在 时 间 &+1L 时 刻 系 统 的 
输出 。 它 是 给 神经 网 络 提供 的 教师 信号 , 它 取 决 于 过 去 = 个 输出 值 . 过 去 疡 个 输 
人 值 。 这 里 只 考虑 系统 的 动态 部 分 ,还 没有 计 人 系统 所 承受 的 扰动 。 为 了 系统 建 
模 , 可 将 神经 网 络 的 输 人 输出 结构 选择 得 与 要 建 模 的 系统 式 (7.17) 相 同 , 用 yw 表 
示 网 络 的 输出 , 则 神经 网 络 模型 为 


人 


全 十 1) 一 写 六 《二 十 了 一 拓 [30 下) yp 志 一 1 一 座 十 工 ) 
汉人 下 (一 工人 十 1] (7.18) 


式 中 , 表示 网 络 输入 -输出 的 映射 。 注 意 输 人 到 网 络 的 量 包 括 了 实际 系统 的 过 去 
值 。 很 明显 ,在 这 个 结构 中 利用 神经 网 络 输 人 ,再 加 人 系统 的 过 去 值 ,扩大 了 输入 
空间 。 但 这 实质 上 完成 了 基于 当前 最 新 观测 数据 对 系统 输出 的 一 步 超前 预报 ,所 
以 称 为 一 步 预报 模型 。 在 这 种 捉 -并 联 辩 识 模型 的 建立 过 程 中 ,神经 网络 的 训练 等 
同 于 静态 非 线性 函数 的 逼近 问题 。 因 为 系统 是 输入 有 界 和 输出 有 界 的 ,所 以 在 辨 
识 过 程 中 所 用 的 信息 也 是 有 界 的 。 而 且 在 模型 (神经 网 络 ) 中 不 存在 反馈 ,因此 可 
以 保证 辩 识 系统 的 稳定 性 。 玫 这 各 方法 得 到 的 模型 ,通过 自身 输出 反馈 构成 一 个 
系统 ,也 可 以 预测 被 测 对 象 未 来 的 输出 ,但 只 有 当 对 象 具 有 较 强 的 收缩 特性 时 , 才 
能 保证 模型 和 系统 之 间 的 误 卷 趋 近 于 零 。 

如 果 将 图 7.4 中 神经 网 络 模型 的 输入 中 y% 痪 成因 ,模型 的 答 人 是 由 过 程 的 
输入 和 模型 自身 的 输出 反锁 构成 的 ,这 就 是 正 向 建 模 的 并 联 连接 结构 ,如 图 7.$ 所 
示 。 其 模型 的 输出 可 写成 式 (7.19) 的 形式 。 


(天 十 1 = 大 [3 人 Jo 人 加 1 一 姑 十 划 ) 
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于 (故人 (下 一 直下 一 下 二 1 (7 ， 19) 


式 中 ,表示 网 络 输入 -输出 的 贞 射 。 在 这 种 情况 下 , 输 人 到 网 络 的 基 包 括 了 神经 
网 络 模型 的 过 去 值 。 虽 然 神经 网 络 模型 内 部 还 是 静态 函数 ,但 整体 上 构成 一 个 动 
态 系统 。 在 训练 时 通过 对 网 络 的 参数 调整 ,使 模型 动态 映射 到 输出 ,从 而 逼近 被 测 
系统 的 非 线性 变化 轨 线 。 这 种 并 联 准 识 的 模型 ,在 输入 作用 下 ,可 以 得 到 更 好 的 输 
出 矣 测 。 在 这 种 意义 下 ,我们 称 该 模型 为 常 时 段 预测 模型 。 这 种 结构 的 模型 比 图 
7.4 结 构 的 模型 对 非 线性 特性 有 更 好 的 有 逼近 能 力 。 图 7.5 是 -- 种 常用 形式 。 


区 [ 肌 





轴 7.5 正 向 建 模 (并 联 扒 识 ) 鱼 构图 


除了 上 述 正 向 建 模 ( 训 - 并 办 识 .并联 辨识 ) 结 构 外 ,还 有 道 向 建 模 结 构 。 在 赣 
向 建 模 中 ,有 直接 逆向 辨识 和 特殊 送 向 辨识 结构 。 直 接 逆向 辨识 建 模 结 构 如 图 
7.6 所 示 。 从 图 可 见 , 待 办 识 系 统 的 输出 作为 神经 网 络 !INN) 的 输入 ,NN 输出 与 系 
统 的 输 和 人 比较 ,用 其 误差 来 进行 训练 NN, 因而 NN 将 通过 学 习 建 立 系 统 的 逆 模 
型 。 上 由 于 这 种 学 习 不 是 目标 导向 的 ,在 实际 工作 中 ,系统 的 输 和 人 = (E) 通 常 是 经 过 
调节 器 得 到 的 ,不 可 能 预先 定义 ,因此 采用 图 7.7 所 示 的 双 网 辨识 结构 。 对 于 被 状 
识 系统 ,网 络 NN 和 NI 的 权 值 同时 调节 ,ez=z - m 是 两 个 网 络 的 训练 信号 。 妆 
el 接近 0 时 ,网 络 NN 和 NI 将 是 系统 送 模 型 的 一 个 好 的 近似 。 这 里 要 求 NN: 和 
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MNIN2 是 相同 结构 的 网 络 , 即 网 络 的 输入 层 . 隐 层 和 输出 层 神 经 元 节点 的 数目 相同 。 
当 网 络 训练 好 以 后 ,网 络 NNi 相当 于 一 个 前 馈 控制 器 ,使 系统 的 输出 <) 和 期 望 什 
接近 一 致 , 即 e1 接近 于 0, 网 络 NNz 是 系统 的 逆 模 型 。 这 种 双 网 结构 又 称 为 神经 网 
络 的 直接 逆 控 制 。 

另外 ,如 果 把 图 7.7 所 示 的 双 网 辨识 结构 稍 作 改动 , 即 用 NINI 的 输 册 xf) 作 
为 NINz 的 输入 ,NIN2 的 输出 和 系统 的 输出 y( 上 ) 之 差 来 调节 NINa 的 权 值 ;用 系统 
的 输出 y() 和 系统 输出 期 望 值 w4R) 之 差 来 调整 NNI 的 权 值 。 这 样 的 网 络 结 构 
被 称 为 正 - 逆 建 模 结构 , NT 变 为 正 向 辨识 建 模 网 络 , 则 NNi 是 逆 榨 制品 。 











疼 7.7 慌 网 结 枯 ! 寺 接送 控制 ) 


7.3 辨识 中 币 用 网 络 训练 算法 


系统 罪 识 和 自 适 应 控制 是 紧密 相关 的 ,从 上 述 辩 识 的 常用 结构 可 以 看 出 , 正 回 
建 模 中 被 辨识 系统 类 似 于 自 适 应 控制 系统 的 参考 模型 , 双 网 办 识 结构 中 的 系统 和 输 
出 期 望 值 ye 人 CR) 也 类 似 于 参考 模型 的 输出 。 因 此 ,这 一 节 首 先 讨论 模型 参考 自 适 
应 系统 的 基本 结构 ;其 次 是 对 在 系统 辨识 中 常用 的 BP 网 络 训练 算法 进行 较 详 细 
地 描述 。 


7,3,1 自 适应 控制 系统 基本 结构 


自 适 应 控制 系统 是 一 种 高 性 能 复杂 控制 系统 。 它 既 不 同 于 - - 般 的 反馈 控制 系 
统 , 也 不 同 于 确定 性 最 优 榨 制 系统 和 随机 最 优 控制 系统 。 要 并 明 自 适应 控制 系统 
的 概念 , 先 要 明确 它 与 最 优 控制 系统 的 区 别 。 这 种 区 别 主 要 在 于 所 研究 的 对 象 不 
阿 , 要 解决 的 问题 不 同 。 模 型 参考 自 适应 系统 是 最 常用 的 一 种 自 适应 系统 , 它 由 参 
考 模型 .可 调 系统 和 自 适 应 机 构 三 个 部 分 组 成 。 常 见 的 一 种 结构 为 并 联 模型 参考 
自 通 应 系统 如 图 7.8 所 示 。 图 中 可 调 系统 包括 受 控 对 象 . 前 置 控 制 器 和 反馈 控制 
器 。 对 可 调 系统 的 工作 车 求 ,如 时 域 指标 全 % .6 上 或 通 频 带 等 可 由 参考 模型 直 
接 决 定 。 因 此 ,参考 模型 实际 上 是 一 个 理想 的 控制 系统 ,这 就 是 模型 参考 眉 适 应 系 
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图 7.8 并 联 横 型 参考 自 适 应 系统 


统 不 同 于 其 他 形式 的 控制 之 处 , 它 无 需 进 行 性 能 指标 变换 。 参 考 模型 与 可 调 系统 
两 者 性 能 之 间 的 一 狼 性 由 自 适应 机 构 保 证 ,所 以 , 自 适 应 机 构 的 设计 十 分 关键 ,性 
能 一 致 性 程度 由 状态 向 量 

e， 一 五， 一 其 (7 .201) 
或 输出 误差 回 量 

允 二 敬一 了 《7 了 .211) 
来 度量 , 式 中 , zw ,和 zy 分 别 为 参考 模型 与 受 控 系 统 的 状态 和 输出 。 只 要 误 
莽 向 量 e 不 为 零 , 自 适应 机 构 就 按 减 小 仿 差 方向 修正 或 更 新 控制 律 ,以 便 使 系统 性 
能 指标 达到 或 接近 希望 的 性 能 指标 。 具 体 实 施 时 ,可 更 新 前 置 和 反馈 控制 器 参数 ， 
也 可 直接 改变 加 到 输入 端的 信号 ,前 者 称 为 参数 自 适应 方案 ,后 者 称 为 信和 号 综合 自 
适应 方案 。 





图 7.9 ”其 他 形式 的 模型 参考 自 适应 系统 
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考 自 适 应 控制 系统 ,如 图 7.9 所 示 。 无 论 这 些 结构 的 形式 有 老大 的 差异 ,对 它们 进 
行 分 析 与 综合 的 方法 却 是 基本 相间 的 。 


7.3.2 准 识 中 常用 BP 网 络 训 练 算 法 


在 非 线 住 系统 模型 辩 识 中 ,常用 的 是 一 种 典型 的 饮 层 并 行 网 , 即 志 层 EP 网 
络 。 其 激发 函数 通常 选用 连续 可 导 的 Sigmoid 画 数 
Fz)=1Tzfli+expt- 并 )] 《7 了 .221) 
若 补 辨识 的 模型 特性 在 正 负 区 间 变 化 时 , 则 激发 函数 选 对 称 的 号 gmoid 函数 ,又 称 
双 曲 函数 
六 z) = tanhtz) = 1 一 exPt z) 
1+ expt 一 工 ) 
设 三 层 BP 了 网 络 如 图 7.10 所 示 , 输 入 层 有 M 节点 ,输出 层 有 工 节点 ,而 且 隐 
明 只 有 一 层 , 具 有 六 个 节点 。 一 般 情况 下 六 > M> 工 


《7.23) 





于 


图 7.10 三 层 BP 阅 络 


设 输 入 层 神 经 节点 的 输出 为 ai (=1 2 ,MD); 聊 层 节 点 的 输出 为 wj = 1 
2,…,N)i 输 出 层 神经 节点 的 输出 为 闪 人 =12.…, 工 ); 神 经 网 络 的 输出 四 量 为 
”% ;期 望 的 网 络 输出 向 量 为 %。 下 面 讨论 一 阶梯 度 优 化 方法 , 即 BP 算 法 。 

1) 网 络 各 层 神 经 节点 的 输入 输出 关系 

输入 良 第 守 个 节点 的 输入 为 


pf 
FE 一 过 ， 立 ; 十 全 (7.24) 


二 1 
式 中 ,ri =1,2，……, If) 为 神经 网络 的 输入 : 赤 为 第 ; 个 节点 的 山 值 。 对 应 的 输出 


为 


ci 一 乒 rteti) = -一 一- (7.25) 


一 ， 一 计 
1 十 exB et ] + expf - > 一 8 


隐 层 第 ; 个 节点 的 输入 为 
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Pet， - Qi 十 引 (7.26) 
式 中 ,row 9 分 别 为 隐 层 的 权 值 和 第 :7 个 节点 的 冰 值 。 对 应 的 输出 为 
] 工 
0 二 所 mep 一 1+exp( 一 mebp) 1 ep(- > 本 (7.27) 
输出 层 第 在 个 节点 的 输入 为 
Hetk 一 二 丸 呈 十 所 (7.281》 
式 中 ,zx， 8 分 别 为 输出 层 的 权 信和 第 大 个 节点 的 六 人 。 对 应 的 输出 为 
六 = Je = -一 一 一 = 一 -一 0.29) 


1 _ 
二 expf Fe 丰 1+ exp(- 21 ou 本 一 由) 


2) BP 网 络 权 值 调整 规则 
定义 每 一 样本 的 输入 输出 模式 对 的 二 次 型 误差 画 数 为 
丁 = 到 补 ( 基 一 aa (7.30) 
则 系统 的 误差 代价 靖 数 为 


已 且 二 
瑟 = >/E = 了 >， 人 (3 一 GD) (7.31) 
目 二 】 站 三 1 点 二 上 

式 中 ,已 和 工 分别 为 样本 模式 对 数 和 网 络 输出 节点 数 。 问 题 是 如 何 调整 连接 权 值 
使 误差 代价 函数 三 最 小 。 下 面 讨论 基于 式 {(7.30) 的 一 阶梯 度 优 化 方法 , 即 最 速 下 
降 法 。 

(1) 当 计 算 输出 层 节 点 时 ,eu = 类 ,网 络 训练 规则 将 使 王 在 每 个 训练 循环 按 
梯度 下 降 , 则 权 系 数 修 正 公 式 为 


疡 庆 一 一 并 一 ”三 四 (7.3 了 2) 


为 了 简便 , 式 中 略 去 了 五, 的 下 标 ; 式 中 ,met 指 输出 层 第 上 个 节点 的 输 人 网络 ;7 
指 榜 度 搜索 的 步 长 ,0< ?ct1。 于 是 








定义 输出 层 的 反 传 误差 依 号 为 
9 王 昌 E 日 姑 吕 
co ztet 口 35 忆 71C 引 一 (3 一 池 ] 到 二 Pett1 


= (和 一 如) Caete) (7.3 守 ) 


一 一 < 一 rr rr 
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对 式 (7.29) 两 边 求 导 , 有 





产 (Cnet = 六 petg)[fl- 让 rite = 有 人 一 希 ) (7 了 .35+》 
将 式 (7.35) 代 人 式 {7.34) ,可 得 
忒 一 凑 代 一 基 1 一 黄 肛 二 2 了 17.36) 
(2) 当 计 算 隐 层 节 点 时 , 式 (7.30) 中 ,am =ai, 则 权 系 数 妖 正 公式 为 
3 ， 3 抱 
包 训 1 二 (了 .371 


中 认 忆 3 
为 了 简便 , 式 中 略 去 了 Epo 的 下 标 ,于 是 
9 五 aEF axeti 3 























qzeg pety 可 Ti Det (7.38) 
定义 隐 层 的 反 传 误差 信号 为 
了 刁 口 Bi 3 
1 日 Fe ai 引 et 本 了 (net (7.39) 
式 中 
9E 上 口 乒 Qzaete 工 口 丘 了 
Bai 2 口 jEE cz 国 器 2EH aa 后 TO 人 
了 了 五 工 
四 之 [过 jw 一 之 / 0 基 (7.40) 
又 由 于 广 (aeb)= at1E- 中) 所 以 隐 层 的 误差 反 传 信号 为 
上 
已 一 if 一 ai) 了 > 记 ty (7.41》 
k=1 


为 了 提高 学 习 速 率 ,在 输出 层 权 值 修 正式 (7.32) 和 隐 层 权 值 条 正式 (7.37) 的 训练 
规则 上 再 加 一 个 “* 势 态 项 *(motmnentum term) ,输出 屋 权 值 和 隐 层 权 值 修正 式 为 

| +1) = woR() + Wibsai +as[zox(R) ~- os 一 1)] 输出 层 

roi( 有 十 1)》 一 reg( 开 ) + Se + o[rs(E) 一 zu 有 一 1 隐 层 
(了 .42》 

式 中 ,ya 均 为 学 习 速率 系数 ,? 为 各 层 按 梯度 搜索 的 步 长 ,a 是 各 层次 定 过 去 权 
值 的 变化 对 目前 权 值 变化 的 影响 的 系数 ,又 称 为 记忆 因子 。 

下 面 给 出 在 系统 模型 辩 识 中 BP 反 向 传播 训练 的 步骤 ， 

人 1) 置 各 层 权 值 和 冰 值 的 初 值 , wx ,zw ,b 为 小 的 随机 数 阵 ; 给 误差 代价 函数 
es 赋值 ;设置 循环 次 数 尺 。 

【2) 提供 训练 用 的 学 习 资 料 : 输 人 和 拖 阵 zz (有 =1,2，p 民 和 =12 Ad) ,经 
过 系统 后 可 得 到 目标 输出 wu ,经 过 神经 网 络 后 可 得 到 业 ,对 于 每 组 上 进行 (3} 一 
《3)1 
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《3) 按 式 47.29) 计 算 网 络 输 出  , 按 式 (7,27) 计 算 隐 层 单元 的 状态 w ; 

(4) 按 式 (7.36) 计 算 输 出 层 训 练 误差 值 名, 按 式 (7.41) 计 算 隐 野 训 练 误差 
值 六; 

(5) 按 式 (7.42) 修 正 输出 层 权 值 和 隐 层 权 值 rwx 和 ev 

(6) 当 每 次 经 过 训练 后 ,判断 指标 是 朱 满 足 精度 亡 求 , 即 判 断 误 差 代 价 函 数 式 
(7.30) 是 否 达 到 下 上 委 s? 若 满 足 要 求 转 到 (7) ,否则 再 判断 是 否 到 达 设 定 的 循环 次 
数 上 = 民 ? 大 循环 次 数 等 于 尺 . 转 到 (7), 否 刚 转 到 (21) ,重新 读 取 一 -组 样本 ,继续 循 
环 训 练 网 络 ; 

(7) 停 下 。 

BP 模型 把 一 组 样本 的 IXMD 问题 变 成 一 个 非 线 性 的 优化 问题 ,使 用 了 优化 中 最 
普通 的 梯度 下 降 法 ,用 适 代 运算 求解 权 系 数 ,相应 于 学 习 记 人 忆 问 题 。 加 人 隐 节 点 使 
优化 问题 的 可 调 参数 增加 ,从 而 可 得 到 更 精确 的 解 。 如 把 这 种 神经 网 络 看 做 从 输 
人 到 输出 的 映射 , 则 这 种 映射 是 一 个 高 度 非 线性 的 映射 。 如 葵 人 节点 个 数 为 次 ， 
输出 节点 个 煞 为 工 , 虽 网络 是 从 R-R- 的 映射 。 即 

下 :有 Rm -> 肛 , 科 一 开 ( 基 ) 
(7.43) 
式 中 ,X,Y 分 别 为 样本 集合 和 输出 集合 。 


7.4 改进 的 BP 网 络 训练 算法 


昌 然 BP 网 络 有 其 重要 的 意义 ,但 在 实际 庶 用 中 存在 不 少 问题 : 

《1) 学 习 算 法 的 收 敏 速度 很 慢 。 因 为 BP 算法 是 以 梯度 下 降 法 为 基础 的 , 只 具 
有 线性 收敛 速度 , 虽 通 过 引 人 “ 势 态 项 "增加 了 一 定 程 度 的 二 阶 信息 ,但 对 算法 的 性 
质 并 无 根本 的 改变 。 

(2) 学 习 因 子 和 记忆 因子 ?,a 没有 一 种 选择 的 规则 , 若 选 得 过 大 会 使 训练 过 
程 引起 振荡 . 若 选 得 过 小 会 使 训练 过 程 更 加 缓慢 。 

(3) 网 络 对 韧 始 值 的 敏感 性 。 同 一 BP 网 络 不 同 的 初 值 会 使 网 络 的 收 伍 速度 
差异 很 大 。 若 初 值 权 值 离 极 小 点 很 近 , 则 收敛 速度 较 快 ; 若 才 值 权 值 远离 极 小 点 ， 
则 收敛 速 度 极 慢 。 另 外 , 若 输入 初 值 不 合适 ,训练 起 始 段 就 会 出 现 振荡 。 

(4) 网 络 的 隐 层 节点 个 数 的 选择 尚 无 理论 指导 ,而 是 根据 经 验 选 取 。 

(5) 从 数学 上 看 BP 算法 是 一 个 非 线 性 的 优化 问题 ,这 就 不 可 避免 地 存在 局 部 
极 小 问题 。 

近年 来 人 们 对 BP 算法 做 了 大 基 研 究 改 进 工作 。 主 要 包括 以 下 几 个 方面 : 

(1) 提高 学 习 速率 的 方法 研究 。Jacobs 等 在 这 个 研究 中 做 了 大 量 工作 ”:。 他 
们 主要 是 根据 学 习 进 展 情 况 ( 一 般 指 训练 误差 ) 在 训练 过 程 中 改变 学 习 因 子 。 采 用 
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这 种 方法 改进 的 了 算法 ,其 好 处 是 不 增加 额外 的 计算 量 ,通过 调整 学 习 因 子 基 本 
上 可 保证 算法 的 收 伊 ,但 还 是 不 能 令 人 满意 。 

《2) 利用 目标 函数 的 二 阶 导 数 信 息 对 网 络 训练 精 度 的 改进 。Kramer 等 在 这 
方面 做 了 大 量 研究 。 这 种 方法 主要 是 利用 指标 函 效 二 阶 信息 , 即 二 阶 导 数 定 阵 
(Hessian) 或 是 对 二 阶 导数 矩阵 的 近似 ,这 样 构成 其 具有 超 线 性 收 伍 的 算法 。 这 种 
研究 是 以 非 线性 优化 理论 为 基础 的 ,是 将 BP 多 层 网 的 训练 问题 归结 为 一 个 非 线 
性 的 规划 问题 。 这 样 一 来 ,优化 理论 中 的 各 种 优化 算法 (如 苍 梯 麻 法 . 变 尺 度 法 、 
Newton 法 及 对 这 些 算法 的 改进 算法 ) 都 可 以 用 来 对 非 线 性 的 规划 问题 求解 。 但 这 
种 算法 的 永 用 带 米 一 些 实际 问题 。BP 驼 层 网 本 身 就 是 一 种 并 行 处 理 结构 ,要 采用 
这 种 改进 的 算法 , 则 必须 将 网络 的 权 值 展开 构成 一 个 权 向 量 来 进行 各 种 向 量 .年 阵 
运算 ,或 者 构成 一 个 和 矩阵 近似 指标 范 数 ,该 阵 是 关系 权 值 向 量 的 Hessian 阵 。 这 对 
于 多 层 阿 的 并 行 处 理 能 力 有 较 大 影响 。 有 些 研 究 者 将 二 阶 信 息 应 用 到 某 一 层 或 者 
某 一 节点 ,这 在 一 定 程度 上 对 网 络 训练 的 精度 有 所 改进 ,但 又 使 运算 工作 量 增加 ， 
从 而 影响 了 训练 速度 。 

以 上 两 种 改进 算法 为 提高 神经 网 络 的 训练 速度 和 精度 的 研究 奠定 了 基础 。 在 
《1) 的 研究 中 ,如 果 册 考虑 如 和 何 提高 网 络 的 抗 干扰 措 施 和 -- 些 对 并 行 网 的 综合 管 
理 , 将 会 得 到 更 加 理想 的 效果 。 在 (2) 问 题 斌 究 寺 ,虽然 二 阶 导数 信息 使 计算 的 复 
杂 性 增加 ,但 网 络 训练 的 有 效 性 可 提高 一 到 两 个 数量 级 ,因此 ,对 非 线性 程度 不 太 
严重 .并行 算法 要 求 不 太 高 且 被 测 系统 过 小 过 程 较 慢 的 情况 ,二 阶 算法 是 可 用 的 。 


7.4.1 基于 降低 网 结 灵敏 度 的 网 络 改进 算法 


1) 神经 网 络 灵敏 度 的 定义 

BP 网 络 学 习 算 法 的 收 傻 速度 很 烛 的 主要 原因 是 由 于 BP 网 络 是 一 种 全 反 传 
式 的 前 向 网 络 , 即 只 要 误差 反 传 信和 导 存 在 ,网 络 所 有 层 的 权 值 统统 修正 ,从 而 造成 
了 学 习 时 间 的 拖延 。 在 上 述 改 进 BP 算法 (了 所 高 学 习 速 率 的 方法 研究 的 基础 上 ， 
若 在 神经 网 络 的 误差 反 传 权 值 修正 时 增加 一 个 协调 器 ,该 协调 器 将 全 反 传 式 网 络 
变 成 局 部 反 传 式 网 络 ,就 会 使 网 络 学习 速 率 太 大 提高 。 执 调 器 的 协调 方法 要 苇 对 
网 络 的 灵敏 度 的 分 析 来 决定 。 神 经 网 络 的 灵敏 度 是 指 作为 辨识 器 或 控制 器 的 神经 
网 络 对 各 种 变化 和 扰动 的 自学 习 . 自 调整 . 自 适应 的 能 力 。 因此 , 据 文 献 152j 和 
[54j ,对 神经 网 络 的 灵敏 度 做 如 下 定义 。 

定义 7.1  A 次 是 由 信号 的 各 种 变化 及 扰动 引起 的 网 络 输出 变化 . | As | 为 网 
络 输 和 人 . 权 值 变化 及 被 辨识 系统 变化 引起 的 综合 误差 ,对 第 ; 样本 ,神经 网 络 辨识 
器 的 灵敏 度 定 义 为 





NMSE(AW 
SS ] 一 ，Ae| 





(7.44) 
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式 中 ,MSE(Cmean square error)] 为 方 羡 。 

21) 降低 神经 网 络 灵 签订 的 一 种 方法 

据 前 分 析 ,这 里 提出 用 于 降低 系统 辨识 中 神经 网 络 灵 答 度 的 一 种 方法 ,用 定理 
7.1 来 描述 : 

定型 7.1 在 网 络 输入 执 动 .网 络 参数 变化 或 被 辨识 系统 参数 变化 时 ,根据 系 
统 在 被 辨识 过 程 中 的 误差 ,动态 地 控制 神经 网 络 各 层 权 值 ,特别 是 最 末 一 级 隐 层 到 
输出 层 的 税 值 生 阵 ( 即 输出 层 的 权 值 矩阵 ) 修 正 ,下 以 使 网 络 的 输出 的 均 方 差 
MSFE(AW ) 快 速 减 小 ,从 而 使 网 络 录 敏 度 3 (降低 。 

证 明 据 文 献 154]」, 设 一 个 三 层 BP 网 络 辩 识 啥 ,网 络 的 输入 层 , 隐 层 ( 售 5-1 
级 ) .输出 层 节 点 数 分 别 为 严 .a bb, 则 网 络 输 人 层 到 第 一 级 隐 层 的 权 值 抢 阵 zi， 
为 2 xm 维 矩阵 ;第 二 级 隐 层 的 权 值 矩阵 wz 为 xm 维和 矩阵 ; 依 此 类 推 , 最 末 一 
级 隐 层 的 权 值 矩 阵 mc -90y 为 和 xz 维 矩阵 ;输出 层 的 权 秆 和 阵 wx 由 为 产 x 维 抢 
阵 ; 对 第 个 输入 z, 的 网 络 输出 分 量 w。 可 写成 


9 =- 记 之 于 rt， ay 三 + 的 久 的 )+ 的 )+ 十 的) 
(7.45) 


由 于 激发 函数 Sigmoid 函数 连续 可 微 , 而且 作为 辨识 器 的 神经 网 络 的 输 人 到 输出 
共 经 过 了 级 Sigmoid 函数 ,因此 网 络 输出 对 各 层 权 值 的 微分 为 


Gyogxdi1i 三 yl 一 3 之 0 QDII 一 从 人 -1 和 


从 > 3 从 aaik 上 op) zzz 人 一 QU Ji 【7 . 46+ 


式 中 ,ar 为 网 络 第 一 -一 级 陷 层 节点 的 输出 ; aa 为 第 二 级 隐 层 的 输出 ;ats- 0 为 最 末 
级 隐 层 的 输出 。 


吕 Jai AYe2ii 一 3 一 站) TEN ae-DiC1 一 如 (1 
一 1 


光 ， 尼 3 Gil 一 &2)al， 《了 .47) 


4 一 上 


口 ypg va Tb 一 3ootl 一 0 ])7 《了 7， 48) 
从 式 (7.46) 到 式 (7.48) 丁 推 得 ,网络 的 各 层 权 值 变化 对 应 的 网 络 输 出 变化 量 丰 写 
成 


站 3 sfl 2 证 are 0 
主 二 | 
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区 人 > 记 3 Q2i 1 一 aa ) >， Y02iG1t CT 一 外 1 区 | [ar 《7 了 .491) 
三 一 上 1 一 上 


和 9 本 | 全 3 >， TD 9 一 81 
i 一 1 


共 了 记 竹 妈 2 让 工 一 马 21 区 1 | Aues 《7.50) 
i=1 
Asa se 人)atcanl Atom (7.51) 


由 于 0<w <1.0<arc1 0<carDic1l ,从 式 (7.491 一 (7.51) 可 见 , 当权 值 
矩阵 seo 变化 一 个 单位 ,网 络 的 输出 yw; 的 变化 最 大 不 超过 0.25; 当 wu -505 变化 
一 个 单位 , 系统 的 输出 wz 的 变化 最 大 不 超过 (0.25) = 0.0625; 以 此 类 推 ， 
ao oj 变 化 一 个 单位 ,系统 的 输出 yw 的 变化 最 大 不 超过 (0.25)?…; 当 9=e-1 
时 ,zt go) 即 为 1D7 1 变化 一 个 单位 ， 系统 的 输出 pri 的 变化 最 太 不 超过 
(0.25)。 由 于 is 经 过 了 5 级 Sigmoid 函数 的 作用 , 它 对 网 络 输出 的 影响 最 小 ， 
而 wy 只 经 过 了 一 级 Sigmoid 函数 的 作用 ,因此 它 对 网 络 输出 的 影响 最 大 。 

从 而 可 网 ,神经 网 络 和 输出 层 的 权 值 阵 ww 的 元 素 值 的 大 小 对 了 网络 输出 影响 最 
大 ,所 以 , 当 网 络 参数 变化 或 系统 参数 变化 时 .动态 地 控制 网 络 各 层 特 别 是 输出 居 
的 权 值 修正 ,可 以 使 网 络 输 出 的 均 方 盖 MSE(Aw, ) 快 速 减 小 ,从 而 使 网 络 灵 敏 度 
S5( 降低。 

3) 基于 降低 较 络 灵敏 度 的 BP 网 络 改进 算法 

根据 定理 7.1 ,基于 降低 网 络 灵 敏 度 的 BP 网 络 改进 算法 可 描述 为 ， 

(1) 在 常规 BP 学 习 算 法 基础 上 ,在 网 络 的 误 善 反 向 传播 信号 线 上 增加 一 个 扫 
调 器 ,该 协调 器 控制 各 层 祝 值 的 修正 ; 

(2 当 网 络 的 综合 误差 |As|( 包 括 网 络 输 出 和 被 辨识 系统 的 输出 误差 的 绝对 
值 |e|{ 又 称 动态 的 训练 误差 )) 较 大 时 ,协调 器 控制 网 络 输出 层 的 权 值 阵 zws 增 大 ， 
使 网 络 输 出 迅速 变化 ; 

(3) 当 训 练 误差 为 10% 委 |e|<20% 时 ,协调 器 控制 网 络 输出 层 的 权 值 降 
os 了 喊 小 ,同时 停止 其 他 层 权 值 的 修正 ,使 网 络 灵敏 度 Su (…) 降 低 , 以 免 网 络 输出 
过 冲 ,造成 反 呵 误差 

(4) 当 训 练 误差 le|<10% 时 ,协调 器 控制 只 允许 幕 近 网 络 输 人 层 的 第 一 或 第 
二 级 隐 层 权 值 修正 ,同时 停止 网 络 输出 层 的 权 值 阵 ww 和 其 他 级 隐 层 权 值 的 修正 ， 
网 络 灵 茹 度 Si (… ) 再 降低 ,使 网 络 输出 和 被 辩 识 系统 的 输出 误差 达到 人 允许 什 。 

上 述 基 于 降低 网 络 灵 敏 度 的 BP 网 络 改进 算法 ,动态 地 将 全 局 反 向 传播 式 网 
络 变 成 局 部 反 传 式 网 络 ,可 以 使 网 络 学 习 速 率 大 大 提高 。 
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7.4.2 提高 一 类 神经 网 络 宅 错 性 的 理论 和 方法 


1) 神经 网 络 容 错 性 概述 

从 神经 网 络 诞生 以 来 ,人 们 就 一 直 以 为 人 工 神 经 网 络 理应 具有 如 同 生 物 神 经 
网 络 的 容错 力 。 换 言 之 ,神经 网 络 应 具有 较 高 的 可 靠 性 , 某 些 能 力 损伤 后 可 通过 学 
习 人 恢复 ,具有 容错 编码 的 能 力 , 共有 空间 上 .时间 上 的 容错 力 。 但 遗 和 伏 的 是 ,要 使 人 
工 神经 网 络 获得 良好 的 容错 能 力 并 不 容易 ,还 有 一 大 片 空白 值得 研究 。 对 BP 两 
络 容错 能 力 最 早 的 研究 是 1992 年 Emmerson 和 Damper 所 做 的 研究 。Emmerson 
通过 实验 表明 , 隐 央 节点 多 的 网 络 并 不 一 定 比 隐居 节 点 少 的 网 络 具 有 更 强 的 容错 
力 。 但 是 , 另 一 种 称 作 “倍增 " 隐 节 点 的 方法 可 以 提高 网 络 的 容错 力 。 例 如 ,针对 某 
具体 问题 采用 3-4-2 三 层 BP 网 络 进行 训练 ,训练 成 功 后 ,将 网 络 的 结构 改 为 3-8- 
2 ,同时 将 隐 层 的 权 值 阵 由 4x3 改 成 gx3 维 ,其 权 值 均 是 原 权 值 的 二 分 之 一 ,从 而 
保持 映射 关系 不 变 。 这 种 网 络 的 容错 能 力 可 望 得 到 改善 ,但 增加 际 节 点 ,势必 使 计 
算 量 增 大 而 影响 训练 速度 , 更 向 况 隐 节点 不 能 无 限制 地 增加 。 这 一 方法 并 没有 从 
理论 上 了 予以 证 明 ![ 喇 。 与 Emrmerson 几乎 同时 发 表 这 方面 文章 的 还 有 Neti 和 
Schneider 等 ,他 们 把 对 于 一 个 已 知 结构 的 网络 寻求 最 大 容错 能 力 的 问题 化 为 求解 
有 欧 东 的 非 线性 优化 问题 , 旦 从 仿真 过 程 找到 了 近似 解 ,并 指出 一 定 程度 上 增加 牌 
节点 可 使 得 到 的 解 更 精确 ,但 这 一 方法 需要 复杂 繁琐 的 计算 。 

Holmstron 从 理论 上 证 明了 对 样本 对 进行 一 定 程度 的 曲 声 污染 可 以 提高 网 络 
的 泛 化 能 力 。 之 后 Minnix 通过 实验 的 方法 证 明 虽 声 污染 也 可 以 提高 网 络 的 容错 
能 力 。Alan Murry 和 Peter Edwards 指出 ,在 BP 网 络 训练 过 程 中 有 意 对 权 值 加 一 
扰动 项 (如 白 噪声 ) ,可 以 明显 提高 泛 化 能 力 .降低 灵敏 度 、 提 高 容错 能 力 。 

文献 [76](1995) 给 出 了 容错 神 叙 网 络 的 数学 模型 ,并 针对 控制 中 的 神经 元 网 
络 , 定 义 了 相关 的 评价 函数 。 我 们 将 其 思想 引申 到 辨 识 所 用 的 神经 网 络 中 。 

定 光 7.2 设 某 一 给 定 的 三 层 神 经 网 络 的 输 人 为 素 ,对 应 的 输出 为 Y。 当 神 
经 网 络 发 生 故 障 上 时 ,神经 网 络 的 实际 输出 为 到 , 则 


1 
Er 一 一 加 《7.52) 


式 中 ,| 到- 玖 上 表示 正常 时 和 故障 情况 下 网 络 输出 的 差 值 的 二 范 数 。 式 (7.32) 
为 神经 网 络 对 故障 六 的 容错 评价 画 数 , 它 反映 了 在 故障 /发 生 的 情况 下 ,网络 执 
行 正 常 功能 的 能 力 。 

模型 1! ”对 于 上 述 给 定 其 拓扑 结构 的 神经 网 络 , 设 其 训练 样本 集 为 工 = 
上 ( 左 , 世 | =1,2…，,g|, 若 存在 适当 的 权 值 年 阵 wm = mm (zy oo yer sr 放 显 


然 ,网 络 权 值 要 受到 网 络 输入 ,扰动 和 学 习 因子 的 影响 ,Bi(w) = 了 六 习 ] 于 一 好 | 
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了 其 极 小 , 即 
。 ， |， ， 工 总 六 | 
玉 fw” ) 一 min( py) 一 min 广 之， > | - 死 | (7.53) 


则 神经 网 络 (wm ”“) 即 为 容错 神经 网 络 。 
模型 2 同 模 型 1 的 设 定 , 若 使 钞 数 
Bi = 站) 
取 极 小 , 即 
Pitw) = minEi(w) = main 二 富生 一 到 PP+ 了 立 阅 于 -于 
(7 了 .33] 
则 神经 网 络 (w* ) 即 为 容错 神经 网 络 。 式 中 , 为 教师 信和 号; 于 为 神经 网 络 在 无 
故障 下 对 应 输入 天 的 输出 ; 9 为 神经 网 络 在 故障 了 发 生 的 情况 下 对 应 输 和 信忠 的 
实际 输出 ,= 1,2,……, 天 ;ar 为 如 权 因 子 ,0< ar<1。 
文献 [77] 在 综述 了 神经 网 络 容错 人 性 的 进 最 后 指出 ,和 铸 今 为 下 所 有 关于 握 高 神 
经 网 络 容 错 性 的 方法 都 仅仅 只 能 通过 实验 证 明 , 学 术 昼 没有 衡量 神经 网 络 容错 力 
的 一 般 标 准 ,更 没有 关于 对 已 知 提高 容 鲁 力 方法 的 让 明 ,这 不 能 不 在 一 定 程度 上 限 
碍 了 寻找 更 多 提 高 容错 为 方法 的 进程 。 
2) 一 种 提高 控制 系统 神 径 网 络 容错 性 的 方法 
前 述 关 于 神经 网 络 容错 性 的 方法 ,无 论 是 “倍增 "法 还 是 “噪声 污染 "法 都 是 提 
高 网 络 容 错 性 的 有 效 方 法 ,但 会 使 神经 网 络 训练 过 程 的 计算 工作 量 大 增 ,从 而 影响 
训练 速 么 。 可 以 证 明 ,增加 网 络 的 层 数 (对 BP 网 来 讲 , 就 是 增加 隐 层 的 级 数 ) 可 以 
提高 网 络 的 容错 能 力 ,但 也 会 影响 训练 速度 。 在 此 基础 上 ,文献 [52] 探 讨 了 一 种 用 
于 提高 系统 辨识 中 神经 网 络 容错 性 的 方法 ,用 定理 7.2 来 描述 。 
定理 7.2 在 神经 网 络 { 设 网 络 的 输入、 隐 层 ( 含 5-1 级 )、 和 输出 层 节 点 数 分 
蝇 为 mm,m,) 作 辨识 器 时 , 当 神 经 网 络 发 生 故 障 ,动态 控制 网 络 权 值 阵 的 乘积 结 
构 
[rent6-D 信 3627D1 《7 了 ,56 
使 其 乘积 和 { 这 里 “乘积 " 指 网 络 各 层 权 值 矩 阵 的 乘积 和 "是 指 该 乘积 结果 所 得 的 
托 阵 所 有 元 素 之 和 ) 尽 量 小 ,是 提高 网 络 容 错 能 力 的 一 种 方法 . 
证 明 ”网 络 输出 ww 对 网 络 输 人 分 量 = 的 微分 为 


可 yj ATi 一 Ji 一 和 ) 之 。 TD ec-DII 加 可 人 -1 人 
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从 而 有 


局 om xj] 3 人 1 一 yo) 人 | 人 有 51] 上 
:=1 


闪 之 ， 3 六 2 人 1 一 2 之。 raiat1 一 红 D ri | Az 《7.58) 
从 定 理 7.2 可 知 ,输入 变化 Az 经 过 Sgmoid 本 数 级 数 越 多 的 权 值 阵 对 赔 络 输出 
的 影响 越 小 。 显 见 ,老式 (7.S8) 的 网 络 输入 变化 一 个 单位 , 则 经 过 
[eate Di 六 mainoti(D.25) 《了 .39] 
的 传递 才 可 得 到 网 络 输出 最 大 可 能 的 变化 Aywws。 因此 ,网 络 输入 六 的 变化 对 输 
呈 的 影响 不 低 取 决 于 与 神经 网 络 隐 层 的 层 数 有 关 的 常数 上 的 大 小 , 丽 且 取 诀 于 权 
值 阵 的 溢 积 的 结构 warece-ba aa2pmwlse 如 果 这 个 乘积 和 的 绝对 值 很 小 ,接近 
零 , 则 羡 的 变化 将 几乎 不 会 影响 和 苯 出 的 变化 。 当 网 络 发 生 故 障 时 ,控制 
areote Do as 结构 使 其 乘积 和 尽量 小 , 少 一 些 反 有 映 在 网 络 输出 上 。 另 外 ， 
无 论 故 障 发 生 在 网 络 的 哪 一 部 食 ,一 县 检测 到 故障 .控制 该 乘积 和 为 最 小 , 都 可 抑 
制 故障 对 输 出 的 影响 。 所 以 ,在 像 了 网 络 一 类 神经 网 络 系统 辨识 中 ,只 要 动态 控 
制 网 络 权 值 阵 的 乘积 结构 [ zesrete-i 信 mayazsrotrj, 则 可 使 式 (7.53) 


El(w)= minEi(w) = min 二 六 | -下 
取得 尽 可 能 小 的 值 ,从 而 可 提高 网 络 容错 力 。 
7.4.3 提高 神经 网 络 收 生 速 度 的 一 种 赋 初 值 算法 


1) 网 络 初 值 概念 

神经 网 络 的 初始 值 对 阅 络 的 训练 速度 有 很 大豆 响 。 在 系统 辩 识 中 , 理想 的 初 
始 值 可 以 使 赔 络 模型 较 快 地 跟踪 冤 辩 识 系 统 而 收 伍 到 其 最 优 解 ,甚至 还 可 以 避免 
一 些 局 部 极 值 点 的 影响 。 但 在 一 般 情 上 下 ,人 们 给 权 值 初 值 赋 以 较 小 的 随机 数 。 
从 激发 函数 敏感 区 的 分 布 情况 来 看 ,小 的 权 值 可 保证 敏感 区 有 一 定 的 宽度 ;但 这 又 
使 网络 的 输出 在 一 定 范 胃 内 变化 缓慢 , 必须 经 过 一 毁 时 间 的 训练 之 后 才能 表现 出 
一 些 被 测 系 统 的 特性 来 。 如 果 这 些 随机 数 与 被 测 系统 的 神经 网络 模型 的 最 优 甫 相 
差 甚大 ,或 者 当 样 本 点 不 在 原点 附近 分 布 或 镀 测 系统 的 非 线性 特性 较 严 重 时 ,这 种 
赋 初 值 的 方法 会 使 网 络 的 训练 速度 很 慢 ,甚至 只 能 收 黎 到 局 部 极 值 上 。 

在 这 方面 ,也 有 学 者 做 过 研究 。Wessel 和 Barnard 于 1992 年 以 模式 分 类 问题 
为 背景 专门 讨论 了 用 初始 化 的 方法 避免 极 小 点 的 问题 。 他 们 的 基本 方法 是 :设法 
使 隐 层 节点 的 中 小 超 平面 穿越 样本 所 在 的 区 域 ,并 且 各 隐 层 节点 的 方向 应 有 尽 可 
能 大 的 差异 。Nguyen 等 从 鹤 层 反馈 网 在 频 域 中 的 特性 出 发 ,提出 一 种 初始 化 的 方 
法 ,其 目的 是 使 初始 网 络 能 够 具有 逼近 任意 函数 的 结构 。Denoeux 等 于 1993 年 提 
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出 一 种 基于 典型 值 的 初始 化 方法 ,这 种 方法 利用 样本 集中 的 一 些 典 型 值 ,对 输 人 向 
量 做 了 一 种 变换 ,使 得 样本 输 人 落 在 一 个 球面 上 ,从 而 使 网 络 选取 合理 的 初始 值 。 
1995 年 文献 [51] 针 对 双 曲 正切 作用 函数 也 提出 了 基于 敏感 区 分 布 网 络 初始 化 的 
方法 ,目的 是 设法 使 网 络 处 于 一 个 良好 的 初始 状态 。 

以 上 这 些 初 始 化 方法 的 研究 多 是 基于 对 网 络 的 台 近 的 经 验 提 出 的 。 在 以 上 学 
者 研究 的 启发 下 ,2001 年 文献 [55] 提 出 一 种 赋 初 值 的 算法 :这 种 算法 针对 BP 网 络 
中 最 常用 的 Sigmoid 激发 了 数 ,综合 考虑 了 网 络 抗 干扰 性 和 敏感 区 的 分 布 情况 , 较 
全 面 地 对 多 层 并 行 阅 所 有 权 值 和 闽 值 进行 设计 。 

2) Sigmoid 函数 泌 ) 敏 感 区 的 分 布 

这 里 针对 三 层 (输入 层 . 隐 层 和 输出 层 ) 且 具有 才 个 隐 层 的 前 向 网 络 来 分 析 网 
络 的 敏感 区 的 分 布 情况 , 设 网 络 有 za 个 输入 节点 zi0i=1:2,…,m) 第 一 耻 层 有 
2 个 隐 层 节点 所 ;人 = 上 ,2 ,2 )。 一 个 隐 层 节点 的 耳 数 关系 可 表示 为 

再 = FT 二 D) = Fnet)y，Het 一 WE 十 日 {7.60) 

式 中 ,zx 为 该 节点 的 输入 启 量 ;，w 为 权 值 矩阵 ; 0 为 阔 值 。 这 里 考虑 激发 画 数 为 
Siemoid 函数 ,激发 函数 大 ) 的 作用 使 得 降 层 节点 的 输出 限制 在 (0,1) ,由 式 47.60) 可 
见 , 隐 节点 的 输出 是 对 输 人 向 量 的 加 权 和 ,然后 经 非 线 性 人 饱 和 变换 形成 的 , 故 其 输出 
等 值 面 是 一 秘 平 行 超 上 面 。 当 某 隐 节 点 的 输出 值 为 < 时 , 式 人 7 .60) 可 与 成 


用 = Atoer+ 扩 = TD 一 4 {7Y.61) 
则 有 


< _ 1-6 (7.62) 





WAX 一 | 





让 一 如 
给 出 以 下 定 交 ， 

定 儿 7.3 “一 个 隐 节 点 的 输出 值 为 a 的 等 值 超 平面 定义 为 等 值 超 平面 P. ,等 
值 超 曲面 能 P= | 已 ,aeE(0,1) | , 隐 层 节点 的 起 始 超 平面 为 Po 





ln 


j- 
PP = 和 Ri (7.63) 
| w| 


Po = 1 Ripux - | (7.64) 
le 


式 中 ,站 = wj/ 表示 隐 层 节点 权 值 向 量 w 的 方向 上 的 单位 向 量 , 称 为 隐 层 方 所 
方向 。 从 原点 出 发 方向 为 种, 的 直线 与 Po 的 交点 Xo 称 为 隐 层 节点 的 起 始 面 中 心 
点 ,可 表示 为 式 (7.65) ,在 二 维 情况 下 ,已 的 分 布 如 图 7.11 所 示 。 


| vw 


一 一 -一 一 一 一 一 一 一 一 一 
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对 任意 一 种 激发 函数 ,都 可 以 用 类 似 的 方法 找到 其 
敏感 区 的 分 布 。 如 果 激 发 函数 取 双 曲 ( 对 称 型 的 Sig- 
moid) 函 数 F(z)= (1-e zt+ez), 在 这 种 函数 作 
用 下 , 隐 层 输出 限制 在 ( - 1,1) 范 围 内 ,因此 敏感 区 以 水 
平等 值 超 平面 Po 为 对 称 中 心 , 若 -- 个 隐 节 点 输出 为 a， 
则 Pu 位 于 等 值 超 平面 P.,P_。 中 心 。 

由 于 Simoid 范 数 在 上 =0 附 近 变 化 最 大 , 即 函 数 班 7.11 Sigmoid 函数 
六 在 其 值 为 0.5 附近 变化 最 明显 , 故 其 函数 的 导数 作用 时 二 维 倘 感 区 示意 图 
三 () 在 :=0 即 零 水 平等 值 超 平面 Pu 上 取 极 大 值 , 所 以 
在 靠近 Po 区 域 节点 输出 变化 较 明 显 。 也 就 是 说 ,靠近 Pu 区域 是 隐 层 节点 上 映射 特 
性 的 敏感 区 。 

定 光 了 ?7.4 ”一 个 隐 层 节点 的 a 水 平 敏感 区 域 4。 定义 为 节点 输出 在 (0,a) 范 
围 内 的 辖 人 民 域 ,可 定义 为 

4 = 二 ROSS AT+D<a| (7 .6 全 ) 
一 个 隐 节 点 的 a 水 平 饱 和 区 域 甩 . 定义 为 节点 输出 值 与 饱和 值 相 差 小 于 a 的 输 人 
区 域 ,并 表示 为 





忆 = 位 后 RAWxr+ 人 2ci [7.67) 
在 饱和 区 域 日. 内 ,节点 的 输出 几乎 是 不 变 的 。 

中 心 超 曲面 的 位 置 及 敏感 区 域 的 宽度 是 由 降 层 节点 的 权 值 和 盖 值 来 决定 的 。 
从 式 (7.62) 和 (7.63) 可 推出 ae 水平 敏感 区 域 A。 的 宽度 C。 可 表示 为 
羡 己 

对 = 避 
从 而 可 见 , 降 层 节 点 敏感 区 的 宽度 取决 于 1 vi 。 当 | wj 太 天 时 ,敏感 区 域 非常 罕 ， 
降 层 节点 主要 工作 在 侈 和 区 ; 当 1vw| 太 小 时 ,敏感 区 域 比较 宽 , 这 时 隐 层 节点 的 泛 
化 能 力 较 强 。 

以 上 所 讨论 的 是 网 络 隐 层 的 一 个 隐 层 节点 的 敏感 区 。 在 隐 层 中 ,每 一 个 节点 
都 有 各 自 的 敏感 区 域 。 这 些 敏感 区 域 的 延伸 方向 是 由 隐 层 节点 的 方向 次 定 的 。 每 
个 隐 层 节点 的 敏感 区 域 的 等 值 超 平 面 可 能 是 相交 的 ,也 可 能 是 平行 的 ,又 因为 每 个 
隐 层 节点 的 敏感 区 域 具 有 无 限 延 伸 的 特性 ,这 使 得 各 聊 层 节点 之 间 形 成 一 种 相互 
交 秋 相互 耦合 的 复杂 关系 。 这 种 关系 给 网 络 训练 带 来 一 定 影响 ,因此 必须 协调 各 
隆 层 节点 的 作用 才能 在 辨识 中 使 模型 无 误 地 眼中 被 辨识 系统 。 

3) 提高 网 络 收 和 伍 速 度 的 赋 初 值 算法 

考虑 到 网 络 抗 干扰 特性 ,网络 输出 层 的 权 值 和 值 对 网 络 输出 影响 最 大 ;同时 
考虑 到 网 络 激发 函数 的 敏感 区 分 布 ,这 种 赋 初 值 算 法 !551 分 两 步 进行 :第 一 步 是 对 








(7.68) 
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网 络 的 输入 到 最 未 一 级 隐 野 之 间 的 所 有 权 值 和 阔 值 的 设计 。 第 二 步 对 输出 层 权 值 
生 值 进行 设计 。 

(1) 第 一 步 ,对 网 络 输入 到 最 末 一 层 隐 蝴 之 间 的 所 有 权 值 和 阀 值 的 设计 : 

设 被 辨识 系统 的 离散 输入 样本 集 为 和 = |xrlyxrz，… 刀 上 下 隐 层 节 点 的 数 昌 为 
7 , 即 = 矶 (= 二 2 pq 交 1 初始化 的 算法 如 下 : 

作 在 样本 集中 任意 节 两 个 不 同 的 样本 点 并 称 之 为 mi,xnz ,通过 测试 所 办 识 
系统 的 输出 得 到 相应 的 其 1 ra , 若 1 = 2 则 另 选 一 个 样本 ,最终 要 保证 3 天 
oh2D 

电 根据 所 选 的 样本 值 计 算 隐 层 节 点 的 方向 

和 = WA TeT= (ra 一 aoDA oa 一 2 (7 .的 ) 

晤 根据 所 选 的 样本 值 计算 隐 层 节点 敏感 区 的 宽度 


bn 人 


fra 二 = 避 | xz 一 | (7.370) 
1 we 


式 中 ,总 为 [1,4] 之 间 的 随机 数 。 
叶 计 算 第 ; 隐 层 节点 上 的 权 值 ( 隐 层 节点 的 输出 e 一 般 取 0.9% 左右 ) 











bn 】 
二 (7.71) 


Wi = wii 
加 该 隐 层 节点 的 中 心 为 mo = (yi + 味 ?)/2 ,该 隐 层 节点 的 阐 值 为 
记 区 (wmt+ 区 2)/2) (7.72) 
重复 中 一 加 直到 求 出 * 对 权 值 、 阅 值 。 即 
w ”二 阳 157 一 [mayrozan] 
避 = 的; = 【00 人 


全 如 果 网 络 输 人 的 节点 数 凤 > 工 ,这 时 网 络 的 输入 到 第 一 隆 层 的 权 值 阵 wiy 
是 mx z 维 的 矩阵 。 由 一 人 @ 已 经 求 出 了 wii 的 第 一 列 , 其 他 加 一 1 列 可 以 用 重复 
求 wii 的 第 一 列 的 过 程 求 敬 ,但 注意 样本 值 不 要 重复 ;或 者 按照 wb 的 第 一 列 的 数 
量 级 随机 地 敬 值 ,但 注意 不 要 取 相 同 数 值 。 

量 如 果 网 络 的 隐 层 的 级 数 大 于 1 ,根据 前 面 对 网 络 抗 干扰 性 的 分 析 结 果 , 越 靠 
近 网 络 输出 的 权 值 ,其 变化 对 网 络 的 输出 影响 越 大 。 因 此 ,第 二 了 刚 层 的 权 值 阵 的 绝 
对 值 应 小 于 第 一 隐 层 的 权 值 阵 , 即 wzy<wly 或 ws 区 w+。 又 考虑 到 隐 层 节点 敏 
感 区 , 故 第 二 隐 基 的 权 值 用 下 面 方 法 求 得 

各 二 W21 二 RCI1z) [Ce 


一 有 [atyrea…yzr] 工 [olyroz rn {7 了 .74) 
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式 中 ,加 E(0.2.0.6),(wio)l 是 第 一 隐 层 的 权 俩 阵 wiy 的 第 一 列子 阵 。 这 样 求 出 
的 w 关 是 小 于 第 一 层 权 值 阵 wb 的 关 xi 矩阵。 由 于 ww 考虑 了 隐 层 节点 敏感 区 
的 分 布 , 因 此 ,用 式 (7.74) 求 取 的 mw“ 既 保 证 了 隐 层 节点 敏感 区 有 一 定 的 宽度 ,又 
对 提高 网 络 的 抗 于 扰 性 有 一 定 的 促进 作用 。 

无 论 阿 络 有 多 少 级 隐 层 ,第 &( 上 > 人 级 隐 层 的 权 值 阵 都 可 用 式 (7.75) 求 取 
Wi 一 Wi 一 古人 15 和] 。 [Ce 并 


二 [DT WO-D2， 和 Un] [weDtwtDa TD 
(7 了 .73) 
式 中 ,(wr-ua)l 是 第 有 -1 级 隐 层 权 值 mw 19 的 第 一 列子 阵 。 对 应 的 益 值 阵 为 
克 = 和 Enyfart+xhtrrn 21 《7.76) 


式 中 必 =1,2 ,naiwm) 是 第 开 级 隐 层 权 值 阵 败 的 第 一 列 于 阵 的 第 ;: 个 元 素 ， 
(zhrt+ WitrrDj72 为 符 台 初始 化 的 算法 中 全 的 贾 个 不 同样 本 的 中 心 点 。 
(2) 第 二 步 , 对 网 络 输 出 层 权 值 和 盖 值 进行 设计 ; 
由 于 阿 络 和 输出 层 权 值 w 的 变化 对 网 络 输出 影响 最 大 。 在 已 知 网 络 输入 到 最 
末 一 级 隐 层 之 间 的 权 值 和 靖 值 初 值 的 情况 下 (这 些 值 第 一 步 已 全 部 求 出 ) ,从 网 络 
输入 的 变化 又 可 以 直接 得 到 最 末 一 级 隐 层 的 输出 ae 兴 。 据 此 ,基于 网 络 抗 于 扰 性 
种 最 小 二 乘法 对 网 络 输出 层 w 的 权 值 进行 设计 ,算法 如 下 : 
全 选择 样本 集中 的 特殊 点 ;如 局 部 极 大 点 .局 部 极 小 点 .关键 性 的 过 小 点 ,并 
求 出 这 些 样本 的 平均 值 点 
= < 本 (7.77) 
式 中 ,9 为 特殊 样本 点 的 个 数 。 若 网 络 的 激发 柄 数 选 对 称 型 Sigmoid 函数 ,该 音 均 
值 可 取 为 零 。 
鲍 求 出 这 些 特殊 点 和 均值 点 r, 的 差 值 ,用 这 些 差 值 组 成 -… 个 特殊 样本 集 
AX = [Ar 一 12.…9| (7.78) 
团 当 将 特殊 样本 集中 的 一 个 变量 加 和 到 网 络 输入 , 则 得 到 一 组 相应 最 末 一 级 
隐 蚊 的 输出 


《全 一 [el az 2 工 (了 ,79) 
如 果 将 特殊 样本 集中 的 每 一 个 变量 都 分 别 加 和 到 网 络 , 则 可 得 到 
Ci Qt | 
大 一 史 2 Q22 2 (7.80) 
必 | 恰 放 了 机 仿 m9 一 





出 根据 特殊 样本 集 可 找到 对 应 的 期 望 值 和 期 望 平均 值 的 误 善 值 , 并 称 之 为 于 
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| JI2 319 
al 3 

了 =| | (7.81) 
3p1 pa ”3 





式 中 ,za 分 别 有 是 网 络 输 出 的 个 数 和 隐 层 节点 的 个 数 。 
曲 误差 下 可 表示 为 卸 = 31- yaAw , 式 中 ,yaAw 分 别 为 网 络 的 输出 
和 葵 出 层 权 和 值 的 变化 。 在 最 太 可 能 情况 下 ,y(1- 妇 ss0.25,A 妈 关 凤 , 从 而 有 
1 一 AN 0.2S.， 6 吕 -= 玉 [7.82 1 
在 上 式 中 ,eu ,站 是 已 求 出 的 征 阵 ,从 而 可 坟 求 出 妇 抱 阵 。 但 o 不 是 方 阵 , 无 法 
求 其 道 阵 ,因此 , 取 
各 = [gw][e 品 ] (7.83) 
从 而 得 到 的 4 是 zxz 阶 的 方 阵 , 只 要 适当 地 调整 隐 层 权 介 便 可 保证 4 的 逆 阵 看 
在 。 则 网 络 输出 层 的 权 值 阵 和 阅 值 阵 分别 为 


和 一 4 下 [am [和 (了 .84》 
入 所 一 | 二 了 DJ (7.85) 
式 中 ,fw)1 为 输出 层 的 关 xz 维权 值 失 阵 we 的 第 一 死 子 阵 。 


4) 应 用 实例 

现 采 用 这 种 研 初 值 算法 对 交流 电动 机 转 善 角 频 率 Aw 和 定子 电流 五 的 非 线 件 
特性 辨识 的 神 径 网 络 进行 初始 化 ,4Aw 和 石 的 非 线性 特性 揪 述 为 

= 了 VCTr+(AaoL2) [rm2+(AafL2+Lo) 六] (7.86) 

式 中 "2,L2, 工 。 分别 为 实际 运行 中 动态 的 转子 等 效 电阻 和 电感 ,为 保证 磁场 恒 
定 , 认 为 磁场 电流 [为 定 值 ， 针 对 2S0W 交流 电动 机 动态 实测 数据 ,以 Aw 为 自 
变量 , 对 应 测 得 石 特殊 点 上 的 样本 集 为 七 =[0.56,0.48,0.26,0.17,0.395， 
0.475,0.535] ,该 样本 是 在 额定 电压 17。= 220V 于 , 变 负 载 , 即 改变 和 交流 电动 机 
同 轴 连 接 的 直流 发 电机 电 枢 上 所 接 的 可 变 电 阻 箱 ,转速 范围 500 一 1420rpm, 分 别 
涡 得 正 转 和 反 转 情况 下 的 定子 电流 后 (A) ,并 取 其 143。 神经 网 络 选 用 “2-6-1 型 
3 层 网 。 现 根据 样本 集 ,利用 提高 网 络 训练 速度 的 初始 化 方法 求 神经 网 络 输入 到 
隐 晨 之 间 的 权 值 ws 和 册 值 @ 的 初 值 wj 和 辣 值 9。 从 所 选 网 络 知 , wz 和 责 分 别 为 
6x2 和 6x1l 的 矩阵 。 从 式 (47.69) 求 担 wx 第 一 列 值 的 方向 为 iv=[-,- ,一 ， 
+,，+,，+]70 取 ae =0.9%, 从 式 (7.70) 求 得 敏感 区 的 宽度 Ce = 
[0.32,0.88,0.36,0,90,4.32,0.24] 7 从 式 (7.71) 求 得 we 的 第 一 列 wi = 
[ -9.2012, -3.3459 ,一 8.1789,3.2716,9.2012,12.2683] 7; 另 取 一 组 特殊 样本 
值 重 复 上 述 过 程 ,并 利用 式 (7.72).(7.73) 求 得 wj 和 阔 值 妃 . 分 别 为 


-一 ”一 一 一 一 一 一 一 一- 一 -一 - -一 -一 
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-9.2012 一 3.3459 -8.1789 3.2716 9,.2012 人 2] 
一 10.1324 -3.3268 一 4.2426 2.8886 13 ,6685 2.2683 
0 = 10.8022.0.6668,1.02323,- 0.3718,-0.9612,-1.0682] 工 


了 一 
wm [wow]= | 


(7.87) 
神经 网 络 输出 层 的 权 值 , 半 值 的 初 值 计算 过 程 从 略 。 利 用 从 电机 实际 运转 统计 的 
60 组 样本 和 计算 的 初 值 ,采用 7 了 .4.1 基于 降低 网 络 灵 敏 度 的 网 络 改进 的 BP 算法 ， 
允 区 流 电动 机 转 差 甫 频率 Amw 和 和 定子 电流 五 的 关系 式 (7.86) 非 线性 特性 进行 关 
识 ,结果 权 值 w 和 国 值 外 的 终 值 ww 和 靖 值 .为 
121.3773 137.3318 1320.4885 125.5352 -146.5570 137.09941 
| .123.5773 134.018 130.3985 125.3232 一 146.3570 137.0994 
.和 = [1.1345.0.9015,0.9924,1.0803,-- 9.7212,0.8772] 


(7.88) 

当 网 络 的 权 值 和 靖 值 初 值 赋 堕 机 小 数 时 
mw 交 = [0.010.01; 0.020.10; 0.11 0.02; 0.010.00; 0.010.10; 0.030.02] 
bi = [0.30,0.18,0.10,0.22,0.12,0.24] 工 (7.89) 


利用 相 阿 的 60 组 样本 和 随机 初 值 , 仍 采 用 了 .4.1 基于 降 低 网 络 灵敏 度 的 网 络 改进 
的 BP 算法 对 该 非 线性 特性 进行 办 识 , 结 果 权 值 w; 和 阅 值 外 的 终 值 与 式 (7.88) 数 
量 级 几乎 相 所 。 但 辩 识 违 度 明 显 不 如 前 者 。 它 们 的 辨识 误差 均 方 值 E 见 表 7.1。 


表 ?7.1 两 种 赋 杨 全 法 办 识 误 童 均 方 值 妃 比较 
方法 放 1 全 1 18 I| 30 和 村 了 特 加 
新 愤 初 值 法 百 ; 0.017 站,002 总 ,和 上 日.( 和 修 , 由 ,( 吉 妃 . 0 总 ,各 站 ,0 站 .人 


随 礼 切 救 法 下 | 0.113 0.005 10.008 0.003 0.002 0002 0001 0.001 0.0010.001 





比较 新 赋 初 值 算法 和 随机 小 数 初 始 化 的 办 识 过 程 : 在 P4.1.8G 的 计算 机 上 ， 
用 MATLAB 的 mm 软件 编程 进行 辨识 ,前 者 所 用 的 时 间 为 吉 =5.6s, 而 后 者 时 间 为 
上 = 了 7.5s; 从 表 7 了 .1 可 知 , 新 赋 初 值 算法 辩 识 误差 均 方 值 王 比 随机 初 值 辩 识 的 刁 也 
有 所 碱 小 ;另外 ,采用 这 种 赋 初 值 算 法 对 多 谷 点 .多 峰值 的 多 变 基 非 线性 画 数 进 行 
辨识 ,由 于 新 赋 初 值 算法 的 样本 包括 了 非 线性 特性 的 特殊 点 ,因而 可 避免 网 络 收 伍 
于 局 部 极 小 点 。 综 上 可 见 , 新 赋 初 值 算法 不 仅 能 使 网 络 的 收 伍 速 度 有 -- 定 提高 ,办 
识 误 差 有 所 下 降 ,及 可 避免 局 部 极 小 点 。 


7.4.4 其 他 网 络 训练 技巧 
BP 算 法 在 系统 排 识 中 得 到 了 最 广泛 的 应 用 ,但 由 于 BP 算法 是 基于 梯度 下 降 
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法 的 思想 ,常常 具有 多 个 局 部 极 小 点 。 因 此 BP 训练 时 会 出 现 很 多 问题 ,诸如 不 收 
敏 .训练 速度 慢 或 精度 不 高 等 。 为 了 克服 这 些 问 题 ,除了 上 面 讨论 的 几 种 改进 算法 
之 外 ,下 面 基于 Caudill 在 1991 年 提出 的 BP 网 络 学 习 窗 门 ,加 之 我 们 在 训练 非 线 
性 目 数 和 系统 辨识 时 的 体会 ,介绍 一 些 BP 训练 技巧 ,想必 对 读者 在 神经 网 络 系统 
辨识 时 有 一 定 帮 助 。 

(1) 重新 给 网 络 的 权 值 初始 化 。 有 时 由 于 网 络 的 权 值 的 初始 化 选 得 不 合适 ， 
BP 算法 将 无 法 获得 满意 的 结果 , 此 时 不 妨 重新 设置 网 络 权 值 的 初 值 , 让 训练 重新 
开始 。 注 意 权 值 初 值 不 能 给 得 太 大 。 

2) 给 权 值 加 扰动 。 在 训练 中 ,给 权 值 加 扰动 ,有 可 能 使 网 络 脱离 目前 局 部 最 
小 虑 的 陷阱 ,但 仍然 保持 网 络 训练 已 得 到 的 结果 。 如 果 知 道 网 络 权 值 的 分 布 范围 ， 
例如 在 -5 和 5S 之 间 , 则 加 上 级 10% 的 扰动 , 即 在 权 值 上 加 -0,.5 到 0.5 之 间 的 随 
机 数 。 

(3) 在 网 络 学 习 的 样本 中 适当 加 凤 声 ,这 是 一 种 加 快 训练 速度 和 提高 抗 噪声 
能 力 的 行 之 有 效 的 方法 。 在 学 习 样 本 中 加 点 噪声 ,可 避免 网 络 依靠 死记 的 办 法 来 
学 习 , 因 为 这 种 情况 下 所 有 的 样本 将 不 同 ( 昌 然 有 些 样本 相似 ) 

(4) 学 习 可 允许 有 误差 。 当 网 络 的 输出 和 样本 之 间 的 差 小 于 给 定 的 误差 范 
围 , 则 停止 对 网 络 权 值 的 修正 。 采 用 对 网 络 学 习 宽 容 的 做 法 ,可 加 快 网 络 的 学 习 速 
度 。 另 外 还 可 采取 自 适 应 的 办 法 , 即 允 许 误 差 在 训练 开始 时 取 大 点 ,然后 随 着 训练 
逐渐 减 小 。 

(5) 网 络 的 隐 层 级 ( 层 ) 数 不 能 太 多 。 网 络 的 隐 层 级 数 尺 量 保 持 在 一 级 .在 无 
法 达到 目标 时 隐 层 可 增加 级 数 。 因 为 在 BP 算法 中 ,误差 是 通过 输出 层 向 输 人 层 
反 向 传播 的 , 隐 层 级 数 越 多 , 反 向 传播 误差 在 靠近 输 人 层 时 就 越 不 可 车 ,这 样 用 不 
可 靠 的 误差 来 修正 权 值 ,其 效果 是 可 以 想像 的 。 另 外 隐 层 级 数 多 必然 计算 工作 量 
大 ,影响 训练 速度 。 

《6》 幅 层 的 节点 数 不 能 太 多 。 网 络 的 输 和 人 层 和 输出 层 的 节点 个 数 是 根据 所 训 
练 函 数 成 所 辨识 的 实际 系统 的 具体 情况 而 定 的 。 在 能 保证 训练 精度 的 前 所 下 ,网 
络 隐 层 的 节点 个 数 一 定 不 能 太 多 ,只 要 保证 幅 层 节点 数 大 于 输 人 层 节 点 数 即 可 ,他 
则 会 影响 训练 速度 。 


7.5 神经 网 络 辩 识 的 MATLAB 仿真 举例 


7.5.1 具有 了 品 声 二 阶 系统 辨识 的 MATLAB 程序 剖析 


例 7.1 ”对 具有 随机 嗓 声 的 二 阶 系统 的 模型 辩 识 ,进行 标 么 化 以 后 系统 的 参 


考 模型 差分 方程 为 
可 一 aag( 下 一 1)+Tasy( 开 一 2) 二 bu 人 下 一 十 中 (更 7. 的 ) 
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式 中 ,at=0.3366,az=0.6634,5 =0.68,8s(8) 为 随机 迪 声 。 由 于 神经 网 络 的 输出 
最 大 为 1, 所 以 ,被 辨识 的 系统 应 先 标 么 化 ,这 里 标 么 化 系数 为 $S。 利 用 图 7.5 正 向 
建 模 (并 联 办 识 ) 结 构 , 神 经 网 络 选用 3-9.9-1 型 , 即 输 人 层 ;, 隐 层 ) 包括 2 级 , 输 
出 层 & 的 节点 个 数 分 别 为 3.9.9、1; 采 用 MATLAB 的 mm 软件 编程 来 说 明 对 具有 
随机 下 声 的 二 阶 系统 的 模型 辨识 方法 ;采用 7.4.1 所 述 的 改进 的 BP 算法 (MBP; 
modified back propagation) ,在 常规 的 BP 网 络 中 增加 动 调 器 ;激发 菌 数 采 用 sig- 
moid 图 数 。 

解 【附带 光盘 有 相同 程序 :FLch7NNeg1l.m, 可 直接 在 MATLAB 6.1 系统 运 
行 ) 

1) 编程 如 下 
部 初始 化 :vb 志 示 第 … 隐 屋 权 人 慎 wk al 表 记 wiik 一 Tiwl2 的 表示 第 二 
六 隐 层 权 值 waifk-21.wl21j 表示 wa 人 k-1T)3w2m 玫 永 输出 层 权 和 值 wk 一 2 wd 
双 囊 示 wiik- 草 9 表示 陷 层 阅 值 中 表示 输出 层 国 值 ; 置 标 必 化 系数 =5 等 
wd 全 二 [01 人 .02:.1.11. 昭 ;010131101.025.1.1.021 和 .111.1.110.1.];. 吉 .1]; 
本 =[.1.2.113 .02.13. 交 人 . 咯 . 妥 ; 的 .1 吴 111023 押 0.1.1.1.1;0. 区 11; 
wj=[ .002;1i21.1.15.13.1.11 =100 0230 .111 和; 
咯 =[.9.8.7.6.1.2.1.1.1]; ql20= 叮 ; qUj=[.5.2.3.4.1.2.1.1.14qtj=aljji 
Wi 一 we 2 的 =w20i 村; 
11=5， 顺 =0 切 =.2 = PI=.3 ww= 小 区 =[11H，，a=[illi]i n=]0， el=0i 
明 = 有 有 = 人 = 村 =0， 加 =0; 提 =0i 禄 = 有 加 下 计 = 由 ; 
只 地 0， 风 = 和 uU=0， 由 = 和 这 = 由 后 下 = .778 叫 = 归 一 记 ; KRL=1， lnh= 站 | 四 = ,053) 
弄 = 到 2= 间 2 向 二 上 本 = T=0i =0i 5s 一 01 员 = 届 
蚤 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 中 十 十 于 十 二 十 十 十 十 十 十 十 十 十 十 十 双 宙 始 化 结 训 
v1 =Iandnf40,1); 各 产生 和 个 随机 数 ,1 代表 噪声 鹿 k) 
for 下 一 1:40 各 训练 4 次 开始 
弛 二 避 - 和 viltn 
yn= .3366 "92+ ,6634* alL+s"sl， 和 %% 参 考 模型 y(ky=ayfk-1)+ayk-2+butk-1)+Ek) 
兄 = 只 到 = 交 | 环 = 关 | 忠和 = 天王 XE17L =Y( 人 一 
胞 = 一 加; 和 af[m) = 
ior k=1n 久 每 个 好 样 点 训练 次 开始 
遥 calculating cutput of the hidden jayer 











明 cculatimng wutput of the hidden jayerf ly) 
jeor 1= 工 号 
XL 三 [wlliis 1 区 全 和 十 il 2 区 (人 23] 二 [wifi 3 友人 3] 
一 X1L+aqltiri io=1x[l+erpf 一 xj] oo Hi 一 吕 end 
% ealeujating output of the hidden jayer( 2) 
for 1i=13:9 
for j 三 1:9 
2 一 十 育 了 晤 1 人“ 让 6 
z= 列 +qtif ii es=lz[1+ern 一 xi oaify=o end 
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名 cajedlating Cutput of 引 e outbut layer 
for ji= 1: 乡 

六 = 负 +w21jfi :7 al 友 feng 

7i= 多 + 站 | YE1+exRC 一 站; 
骆 caleulating errnr Yalue between dim and FTactiee vBlue 
二 =eli 时 = 如 ii 雪 =[OPp 一 站 .22] E 匡 = 过 ; 
XML= 如 ;了 =eli 可 3= 印 ;机 =[ 区 1 而 2 区 3]; 
包 revising right value (1) 
fcr ji=13:9 
机 =olf iT1-etlft walif:i 抽 讨 算 第 工 隐 层 误 盖 反 传 依 导 
各 =ollif ,dl qw=qllft 一 0 
一 可 玫 ( 人 + .8 二 4 
forj=1:3 
dm 一 友 上 ji 一 IO 人 
wlL2ij=w1100 + .8 go“ 居 ( 十 -67 Ge; 
wWL31 人 一 交 12ij ed 
ed 
wdloi=wli， wii=w1353 的 =qli gl 一 的 %% 递 推 存 情 
外 revising Tigkt value 人 2) 
for 1= 工 : 乡 
红 =ol2if: 站 To 让] w2105 :5 用 计算 第 2 降 层 误差 反 传 信号 
如 =ot3jf :dl qw 王 qi 站 一 申 20 
启 = 上 人 人 和 + -有 do+ ,4 gwi gl234: 三世 
for j=13:9 
Gar= 一 wwl2liti 一 wl20ifi .jy 
WW1221 一 WW1215 人 六 十 -有 " ol1( 人 上 + ,6 di 到 123j0 站 = wj22i end 
emnd 
WwW1201 一 丙 12 打 ;ww]2 才 =wl123034 9l2 册 =q 才 对 为 三 gl23j; 
多 revising right valoe (3) 
半 mc<4，7r=0.2 I=0.0001ielge，r=10.14; 虽 =0.005; end % 协 调 器 的 作用 
员 ii 国 世 =0.006，r=0.0 TIl=0.0; else break; end 
or i= 工 泡 
红 = 六 人 1- 站 (pp 一 轨 1 纪 许 算 输 出 误差 反 传 信和 号 
dm 一 mw21ifi -ww200 5 
w22j = w21jfi,) +r” 亚 可 和 人 (+ .4 dr 十 本 ww230)=w25i enad 
wWw20j= w21; ww21j=w23j， 了 =PL- 抽 了 =pt+ .亲人 pp 一 办 + 5" ph+ 玫 - 名; 
基 = 岂 ;ipL 二 到 Vs yi 
计 晤 菩 ,0 吕 5 break; ese， end 
end  %% 每 个 采样 点 训练 次 结束 

yatio 一 证 全 人) 一 二 惠 愉 m) 一 3 mc=rmi 
end %% 训练 40 次 结束 
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w1 本 = wagij 册 在 MATLAB 主 界面 上 打印 出 第 一 隐 层 权 值 
wdl2ati= wl295 在 MATLAB 主 界面 工 打 印 出 第 二 降 层 权 值 
wa 下 = w23j %% 在 MATLAB 主 界面 研 打 印 出 输出 度 权 值 


rm 二 mi 


呈 大 rapPlier 


subilet 1 mo6 
plptfm, gammabel 臣 ')，ylabelf ya and ymly 
tirlef ldentified model by MIEBP algorilthrn')， 

jegendf ya is system' ,ynm is 计 entified model ii 和 图 标 广 


End 


subpiotf3.1,2]， in=Tm6l 
ylabelferror ) end 
stbhplotf3,1.31， mm 一 1:m64 plotfmvy， xlabalfFk， wabealfirand is ad 


Bjottmy e3) ，xlabelf E ) ， 


2) 辨识 结果 


辨识 绩 果 如 图 7.12 所 示 , 图 中 ya 表示 被 辨识 系统 的 输出 ,ym 表示 神经 网 络 
的 输出 , 即 由 改进 MBP 算法 辨识 的 系统 模型 的 输出 。 在 程序 中 ya 和 ym 已 用 标 
女 化 系数 还 原 到 原 系统 值 。 'error 表示 辨识 过 程 中 的 训练 误 盖 ,在 才 =3 以 前 最 
大 误差 为 2‰ ,之 后 误差 在 1 和 以 内 。 "random ncise "表示 系统 的 随机 唆 声 。 各 层 


权 值 如 下 : 
wlii = 
如 ,2332 
一 心 .1009 
0.2093 
00.0607 
履 .1005 
一 避 .0157 
0.0993 
一 口 .0007 
站 .0993 


wl21j 一 
0.0165 .0 名 
0.0248 0.02 吕 
0.1466 0.16 产 
0.3043 00. 衬 于 


0.4855 
0. 1385 
D.1989 
0.2364 
日 .1261 
一 口 ,151 
0.0989 
避 .0989 
路 .2489 


0.0143 
0.0213 
0.1269 
日 .20 始 


w21j = 

0.2456 一 0.0589 
0.0690 0.1011 
0.0494 0.0478 
0.1214 -0.1522 
0.0211 -0.1189 
0.0994 0.0478 
0.0994 0.0478 
-0.1506 0.0478 
0.0994 0.0478 


0.0104 0.0023 0.0033 0.0023 0.0023 0.0023 
0.0129 一 0.0026 一 0.0008 一 0.0026 -0.0026 一 D.0027 
0.0866 “0.0069 0.018 0.0060 0.0010 0.O069 
0.1842 0.02 如 0.049 002 诏 00237 0.02 襄 


214 ， 


人.13359 01T728 
0.14606 0.1672 
0.1466 0.1672 
0.1466 0.1672 
0.1466 0.1672 


ya and yrn 
一 四 二 


ramdonmi Dise 
1 

总 

P 全 


图 7.12 MBP 算法 对 具有 随机 坷 声 的 二 阶 系统 大 识 结果 
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0.1331 0.004 0.0131 0.023] 0.0 
0.1269 0.0866 0.00605 0.01683 0.0069 
站 ,1269 0.0866 0.0069.， 0.01 拘 0.0009 
0.12695 0.0866 0.0069 0.0168 “0.0069 
入 ,1269 0.0866 0.00609 0.0168 “0.0065 


Identifisd modgel by MBP algerithm 


一 一 yais System 
< ym 证 划 entified modecl 有 


109 15 20 25 3 宾 
长 
1 15 20 2 30 


7,.5.2 多 维 非 线性 辨识 的 MATLAB 程序 剖析 


例 7,2 现 以 二 维 非 线 性 医 数 w% = oos(2r 有 bi 7r 十 2rk2m)sin(2rp2m ) 为 样本 ， 
即 y， 为 教师 信号 (参考 模型 的 输出 ) ,其 中 0<z<36,0< <36: 利 用 图 7.5 正 向 
建 模 (并 联 音 识 ) 结 构 ,神经 网 络 选用 3-6-1 型 ,部 输 人 层 : 、 耻 层 7 输出 层 & 的 节 
点 个 数 分 强 为 3.6.1; 采 用 MATLAB 的 im 软件 编程 来 说 明 用 神经 网 络 对 多 维 非 


线性 函数 办 识 方法 。 


0.013 划 
0.0070 
0.0070 
0.0070 
0 .的 力 








35 0 


人 .0131 
候 ON 多 
们 .0069 
全 .0009 
人 .OO 


解 ” 由 于 样本 幅 值 是 正 负 变化 的 ,因此 ,激发 函数 采用 对 称 的 sigmoid 函数 


( 双 曲 一 数 ) , 即 


和 区 7 章 ”神经 网 阁 袖 型 疼 识 ， 215 ， 





F(z) = 一 expt 一 ) -tanh(z) (7.91) 


1T+ exp( 一 并 ) 
采用 7.4.1 的 改进 的 BP 算法 , 即 MBP 算法 , 即 由 协调 器 来 协调 各 层 权 值 修正 ; 另 
外 ,在 修正 权 值 时 考虑 积累 误 疼 。 隐 层 和 输出 层 的 修正 权 值 式 为 
W1 《下 十) 一 Wi ( 开 ) 十 研 1 语 Wi 十 如 [全 让 二 一 Wi 一 1)] +@3 取 (7 了 .92 ) 
WA 克 十 二 Wo 十) 十 让 Bi 十 总 2[ (下 ) 一 则 让 下 一 上 十 百人 (了 .93) 
式 中 ,w 为 积累 误差 。 也 可 修正 阔 值 ; 若 不 修正 盖 值 ,重新 调整 系数 。 
1) 编程 如 下 (附带 光盘 有 相同 程序 :FLeh7NINeg2.m, 可 直接 在 MATLAB 6.L 
系统 运行 ) 
种 初 妈 化:w106 表示 四 2)7wl11 表 示 ifkr- Tiw2 册 表示 mkE- 2 2 二 表 未 wafk 一 1); 
% 中 和 为 责 值 
wlo=[.001 .加 1 .002; .00I .1 .02; .010 .00I;， .001 .001 .002;.0010 .002; .0011 .001 ,001 7 | 
wlliji=[-.1-. 妇 .1 -2.10-.19 一 .二 .1 -6 .1 一 .13 .13 一 .13 12 .24 一 :16 - .23 
.13] ; 
wj=[.01: .人 21 w21=[ 18 .9 -9.7 8.9]; 
串 =[.5.8.4.6.1.2]; dj=[- .2.2.44 一 ,有 .-02]; 
悦 = 让 加 =.2 人 =1 Pt= .2 w2g=[000;0500] wa =0 ww=0，w0=D 
届 = [0.5 0.3 2 双 inpats 
两 = 四 有 昌 ; 玫 = 册 疗 = 人 mL=DiWam=DiypI= 让 = 着 =1000; =0 eror=D0001 
首 王 上 ; 站 二 在; 导 二 站 | 二 二 有 晤 = 有 四 = 人 村 = 和 =0; 天 = 和 冲 =0 交 =0; 中 三 0 
六 =0i 有 =D u= 由 下 = 由 旭 = 轴 姬 = 2 人 = .0 
绰 = 人 .和 后 |; 到 = 站 0995; 直下. 扫 和 =1;d2=0.0; 
牟 十 十 十 十 十 十 十 十 十 十 十 十 十 十 ~ 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 十 + 十 十 十 十 十 十 + 十 二 十 十 二 + 二 + 响 初 始 化 关东 
forim=1:36 六 变量 mm 开始 训练 
fearn=i:36 和 变量 nm 开始 训 练 
日 一 岂 “有 ,05 rmi PP= 了 站- 扫 ” ni 
Ya= oos[2 0 十 2) Sinl2 bi yzs=0.1 mm 一 ymi 
fr kk=1:6 对 样本 的 一 焉 采样 值 yp 训练 上 次 开始 
fcr ji=1:6 网 cdeulsting eautput cf The hidqen layeT 
= [wa 人 1 了 fw 2] +[wliCi 3 (3 
X=XL+qlif ,及 os= tanhfxyy eoli[i= 吕 ， 
ed 
且 calculating cup of the nutput [arer 
fr 11 
7b=yb+wagjti yolik 0: end 
站 二 负 4pli y=tanhtyii 
划 calculating error v 避 be between 二 mm anq Practice v 汪 De 
加 =eli 直 = 虹 ;地 =[(7p 一 好, 2; 
和 网 revising HSht value 


for i=156 % 收 正 孔 层 权 慎 
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业 =[ 一 时 全 da w23ji0:) 和 =oljf id 直 ; 六 计算 网 屋 误 若 皮 传 信 号 
qi=qljfii 
for j=1:3 
gw 到 寺 让 wj 
让 上 2<0.05，al=0 过 = 人 0 雪 =0 akse，al=0.02; 地 =0.05 归 3=0.0005; 
end;i 名 协调 器 根据 训练 误差 动态 变化 学 习 因 子 
121=wltitjyt+ale do 人 十 "dwr+a“ wji wl3ifii= mwl end 
and 台 覆 正 陷 层 梭 值 结束 
wtoj= will wii=wl35i 吕 =qlj， quj=q3;i 名 递 推 荐 存 隐 层 权 值 和 间作 
二 站 -= .36 0tfmp- 史 :和 计 算 积累 误差 w 
2<0,.004，w=0.78" wji end % 协 调 器 根据 训练 误 差 动 态 变化 学 习 国 子 
for i=1:6 % 蜂 正 输出 层 权 什 
下 =” 人- 六 "fp 一 中信 计 算 输 出 层 误 莽 反 忧 信号 
dw=w21jfi, 一 w20ifi,:)i 
WwW22j = w21i :二 有 ,132 d of 人 +D-26" dwr +0 -0016"wi 和 增加 积 票 误差 w 
w23jfi, : )= w22j; 
end 
wa 人 = wW2lT WwW21 一 Ww23i 
了 一 隆 一 有 了 脱 =pl+ .3 PP 一 纱 + .102 ph 加 = 了 ， RL=P2; 
让 妇 忆 =0.005 breaki elke end 向 痢 断 误 莽 
enad 入 对 样本 的 一 次 采样 值 训 练 上 次 结束 
ypptm,m= 一 ni 的 存 傅 二 维 非 线性 样本 
yomfm: to 一 汉 和 在 铺 神经 网 络 辩 识 结 果 
奴 (mo= 电 2 % 存 情 训 练 误 营 
end ”%% 变 量 mn 训练 结束 
nm 一 严 
and 名 变 量 m 训 往 结束 
可 1 放 = wl3ij 包 铝 末 无 "1” ,可 直接 在 MIATLAB 主 界面 下 观察 陷 呈 权 值 
w21j= w23j 上 可 直接 在 MATLAB 主 界面 下 观察 熔 出 层 权 值 
驼 grapber 
subplotf2 ,， 1 
驹 Blat3tmsn,ypp)i 驹 也 可 用 此 语句 绘制 样本 的 三 维 图 
mesh(k ypp) 的 绘制 样本 的 三 维 图 
xlabelf my ,yabelna yzabelf'yppy， 中 三 维 坐 标 
titlef Iaentifed model by inp. algorithm' )， % 图 题 
subplotf2 ,2 ,2 TDeshi yat 
ahbelf tm yylabeltin ) ,zlabeit yoml 
subplott2 ,1 ,2)1 mesh ec) 
xlabelfna') ,ylabeif rt) ,zabeifie3D; 
2) 准 识 结果 
对 二 维 非 线性 函数 yw = cos(2rxpi za + 2rkaz)sin(2r8g2n) 的 辩 识 结果 如 图 
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7.13, 图 中 yp 为 样本 ;Nm 为 辨识 结果 ; 3 为 训练 误差 。 


identjfied 0 寺 <- 唱 中 goHthm 
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图 7.13 对 二 维 非 线性 函数 w = ees(2r1im + 2xaMJsin(t2rka) 站 的 排 识 结果 


3) 结论 

在 程序 设计 和 调试 过 程 中 ,注意 以 下 技巧 : 轴 只 要 在 程序 中 增加 类 似 浆 或 7 
的 循环 语句 , 便 可 用 神经 网 对 三 维 或 三 维 以 上 的 非 线性 函数 训练 ,也 可 以 用 在 复杂 
系统 两 个 以 上 独立 变量 任意 维 非 线性 动态 参数 的 辩 识 。 回 程序 中 除了 for,end， 
else 和 mesh 语句 外 ,一 般 应 在 语句 未 加 分 号 。 程 序 在 mw2 = m,wllij = wl3ij 和 
w21j= w23j 后 不 要 加 分 号 ,目的 有 两 个 ,一 是 用 m2=m 动态 地 显示 程序 执行 的 状 
态 及 程序 每 次 循环 所 花 的 时 间 ; 二 是 在 程序 运行 结束 显示 隐 屋 和 输出 层 的 权 值 ; 


wllij = w21j = 
-0.0091 0.0758 0,.2083 0.8293 
-0.1206 0.1949 ”一 0.0924 1.5274 
-0.0159 0.2657 ”一 0.0485 0.3184 
0.2347 -0.0319 0.2698 -0.9167 
-0.0142 0.2308 0.3182 0.6995 
一 0.0755 -0.1381 0;2257 1.5786 


图 调整 修正 因子 al .sa2.a3 和 bl .hb2 ,63, 直 到 方差 最 小 , 收 敏 时 间 最 短 为 止 。 轩 一 旦 
修正 因子 .循环 次 数 凸 和 nn 确定 ,调整 第 三 层 内 循环 k 的 次 数 ,可 以 明显 改变 训练 
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精度 和 程序 运行 速度 ,上 = 20, 最 大 方差 edmax = 0.01 ,程序 和 运行 时 间 t= 14s; 
kk=6,e3max=0.032 ,ts= 12s; 上 一 3.e3rmax 三 日 .08,ts= 10s; 上 = 时 一 站 .22，ts 一 
9s. 二 程序 中 ,语句 :“ 计 色 芯 0.0 al =0i 过 = 和 0 归 =03; else，al=0.02; a2= 
4.05; a3=0.005; end; % 协调 器 根据 训练 误差 动态 变化 学 习 因 子 ” ,如果 在 这 条 语 
句 前 加" % “( 冯 不 要 这 条 语句 ) ,训练 误差 将 成 倍增 加 。 这 种 改进 BP 了 网 猴 比 一 般 的 
BP 网 络 在 m,n, 上 相同 的 情况 下 平均 收 倒 速度 约 提 高 两 秒 , 旧 训练 精度 明显 提高 。 


7.6 基于 改进 遗传 算法 的 神经 网 络 及 其 应 用 


在 标准 的 遗传 算法 中 ,基本 上 不 用 搜索 空间 知识 或 其 他 辅助 信息 ,而 仅 用 适应 
度 孙 数 来 评估 个 体 , 并 在 此 基础 上 进行 遗传 操作 。 其 次 ,遗传 算法 不 是 采用 确定 性 
的 规则 ,而 是 采用 概率 的 变迁 规则 来 指导 其 搜索 方向 。 另 外 ,遗传 算法 的 处 理 对 象 
不 是 参数 本 身 ,而 是 对 参数 集 进行 了 编码 的 个 体 。 该 编码 操作 使 得 遗传 算法 可 直 
接 对 结构 对 象 进行 操作 。 由 于 以 上 具有 特色 的 操作 和 方法 使 得 遗传 算法 使 用 简单 
易于 并 行 化 ,具有 较 好 的 全 局 搜索 性 。 因 此 遗传 算法 具有 广泛 的 应 用 领域 。 但 在 
使 用 遗传 算法 中 ,适应 度 函 数 条 件 太 宽 松 ,不 易 设 定 , 常 要 经 过 多 次 试 凑 才 能 确定 。 
文献 [63] 提 出 了 一 种 改进 适应 度 函 数 算法 ,在 此 基础 上 ,将 这 种 改进 的 遗传 算法 和 
神经 网 结合 ,构成 了 一 种 新 型 遗传 神经 解 耦 控制 器 。 仿 真 和 实际 的 炉 群 多 变量 解 
耦 实验 验证 了 该 方法 的 有 效 性 。 


7.6.1 一 种 适应 度 函 数 的 政 进 算法 
1. 适应 度 函数 的 作用 及 其 选择 方法 


适应 度 范 数 的 评估 是 遗传 算法 选择 .交叉 .变异 操作 的 依据 。 该 末 数 不 仅 不 受 
连续 可 微 的 限制 ,而 且 其 定义 域 可 以 任意 设 定 。 对 于 适应 度 郴 效 的 惟一 要 求 是 对 
于 输 人 目标 函数 有 正 的 输出 。 传 统 的 适应 度 函 数 可 采用 以 下 方法 变换 

() 人 史 ()， 当 避 () 文人 na 
人 0， 其 他 情况 
式 中 ,C， 可 采用 铬 种 方式 选择 ,C 可 以 是 一 个 合适 的 输 人 值 , 也 可 以 是 在 进化 
过 程 中 目标 函数 gtxz)} 的 最 大 值 或 当前 群体 中 的 最 大 值 。 从 式 {7.94) 分 析 , Cnux 
条 件 太 宽 松 , 不 易 设 定 。 在 遗传 算法 中 ,对 于 目标 本 数 g{z), 若 由 不 同 的 技术 人 
员 来 设 ,结果 会 多 种 多 样 , 盖 异 甚大 ,无 法 判断 哪 种 结果 最 合理 ,从 和 而 直接 影响 到 址 
传 操作 。 

为 防止 遗 苇 算法 中 的 随机 漫游 现象 ,可 通过 放大 相应 的 适应 度 函 数 的 值 来 提 

高 个 体 的 竞争 力 。 这 种 对 适应 度 函 数 的 调节 称 之 为 定 标 。 自 从 De Jong 开始 引信 


(7.94》 
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适应 度 郴 数 定 标 以 来 , 定 标 已 成 为 进化 过 程 中 竞争 水 平 的 重要 标志 。 定 慰 有 岂 下 
形式 。 
线性 定 标 表 示 为 

万 Cz) = CI 这 ) 十 五 (7.95) 
式 中 ,六 (z) 为 年 标 后 的 适应 度 函 数 :a 和 娟 可 通过 多 种 途径 设置 ,但 必须 满足 原 
适应 麻 函 数 岂 z) 是 定 标 后 的 适应 度 函 数 户 (z) 的 平均 值 ,或 定 标 后 的 适应 庆 函 数 
的 最 大 值 是 原 运 庶 度 画 数 的 指定 倍数 。 除 此 之 外 ,还 有 = 截断 定 标 法 ,好 宕 定 标 
法 等 都 是 适应 度 函 数 的 定 标 方法 。 无 论 以 上 哪 种 适应 度 函 数 的 设 定 及 其 定 标 形 
式 , 均 有 其 不 确定 的 参数 ,如 Cu abc 等 都 需要 在 实际 遗传 操作 中 多 次 撞 索 或 
试 凑 才 能 确定 ， 特 别 是 Cnw, 在 遗传 操作 中 无 规律 可 寻 , 给 遗传 算法 在 工程 中 的 
应 用 带 来 很 大 不 便 。 


2. 适应 度 画 数 的 改进 设计 与 算法 


1) 适应 度 显 数 的 改进 设计 

为 了 克服 传统 的 遗传 算法 中 适应 度 函 数 的 不 确定 性 ,并 且 让 适应 度 卫 数 扎 z) 
路 着 输入 空间 的 个 体 的 变化 而 变化 ,从 而 使 适应 度 通 数 能 合理 地 评价 个 舍 ,进一步 
完成 选择 .交叉 ,变异 的 操作 ,本 文 构造 以 下 改进 适应 度 函 数 


Flz) = | 一 有 (rz)， 当中 cz) < CC 47.96] 


0， 其 他 情况 
”一 工 ) 一 五 到 
外 ea ) [gf 让 + [gf(z)] (7.97] 
or( 工 ) 一 ID8 和 (全 


式 中 ,gw 是 当前 输入 空间 的 个 体 的 最 大 值 ,ELg(zy] 是 二 个 目标 遇 数 的 均值 。 这 
里 利用 g 和 形 [gf(z)] 之 差 的 欧 氏 范 数 再 加 上 ELg(Cz)] 作 为 CC ,并 以 此 取代 式 
(7.94) 中 当前 合适 的 输入 值 Cu ,这 样 不 仅 能 保证 适应 度 函 数 六 z) 为 非 负 值 , 且 
使 Xz) 随 着 输入 空间 的 个 体 的 变化 而 变化 。 在 遗传 算法 中 ,对 辐 目标 函数 g(z)， 
若 由 不 同 的 技术 入 员 来 设 ,结果 会 统一 ,从 而 由 该 适应 庆 函 数 ALz) 来 牵制 遗 待 操 
作 , 使 得 遗传 操作 趋 于 更 合理 ， 

2) 适应 度 函 数 改 进 算法 

改进 适应 度 函 数 将 作为 遗传 神经 解 硬 控 制 器 的 一 个 子 程序 , 求 取 子 程序 步 又 
如 下 ; 

他 从 主 程序 读 个 体 ,计算 目标 函数 本 ( 工 ); 

候 求 gf(z) 的 均值 ,计算 suza = sa dg0z), 并 求 E[gi(r)]= sum/is 

图 判断 gfz)c<g(r)7 若是 ,gof(z)=8ifz)i 若 否 ,直接 转 由 | 

电 根据 式 (7.97? 计 算 
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C = ge(z) 一 下 Lg(z)] 人 二 五 [g(zD)] 
BE 一 mg gm 了 1 | 

中 根据 式 (7.96), 求 取 适 应 度 函 数 涛 之 ); 

地 返回 主 程序 。 


7.6.2 一 种 改进 的 遗传 神经 解 帮 方 法 


将 式 (7.96) 和 (7.97) 改 进 的 适应 度 晒 数 用 于 遗传 操作 ,该 遗传 算法 和 BP 神 
经 网 络 缩合 ,构成 一 种 改进 适应 度 函 数 的 遗传 神经 解 态 控 制 器 。 这 种 控制 器 既 继 
承 了 壕 传 算法 有 " 较 好 的 全 局 搜索 性 ,又 发 扬 了 神经 网 络 “ 对 非 线性 有 较 强 的 盘 近 
能 力 "的 特点 ,因此 ,可 以 用 于 复杂 的 非 线性 才 变 量 系统 控制 。 该 控制 器 的 算法 如 
下 :中 对 神经 网 络 的 权 值 . 阔 值 . 反 传 误差 e .循环 次 数 M 赋值 ;四 按 式 {7.100) 计 
算 神 经 网 络 的 输出 ;地 调用 改进 适应 度 琐 数 的 中 传 算法 子 程序 , 按 式 (7.5%8) 和 
(7.99) 修 正 神 经 网 络 权 值 ;四 判断 反 传 误 莽 委 e? 若是, 转 加 ;他 判断 循环 次 数 = 
At? 者 是 , 转 轧 , 若 否 , 转 凶 ; 迎 结束 。 
改进 适应 度 函 数 的 址 传 算法 主 程序 中 包括 : 凸 根 据 变 解 决 实际 问题 被 控 量 相 
应 的 动态 调节 系数 或 要 通 近 的 函 煞 的 自 变 量 , 通 过 编码 ,产生 初始 群体 ; 设 定 目 标 
函数 g(z) 赋 终结 条 件 值 。 人 调用 改进 适应 着 函数 六 xz) 求 取 子 程序 。 图 执行 选 
择 .交叉 .变异 遗传 操作 。 人 由 统计 结果 ,群体 更 新 ;计算 种 群 大 小 和 遗传 操作 的 概率 
式 (7.99)。 也 将 二 进 制 的 码 译 成 十 进 制 的 数 ,输出 结果 解决 实际 问题 。 针 判断 终 
结 条 件 到 否 ? 若 否 , 转 四 ; 若 到 ,结束 。 
将 系统 的 解 看 控 制 误差 作为 被 控 量 。 为 防止 遗传 算法 操作 中 个 体 太 长 , 计算 
量 大 的 问题 ,这 里 采用 单 神经 元 解 耦 控制 的 方案 , 输 和 人 癌 人 1 为 三 维 列 向 量 , 它们 
分 别 是 误差 es(i) ,误差 的 变化 率 Aefi ) 及 误 盖 关系 式 efi)=2e0i-1)+efi-2)， 
由 遗传 算法 操作 来 完成 权 值 矩 阵 mw( 的 修正 ,mi) = [wbzoaym3s'9] ,其 中 
21vToI3 分 别 是 三 个 输入 量 到 单 神经 元 的 权 值 ,6 为 单 神 经 元 的 盖 值 , 若 认为 权 
值 在 -16~ +16 之 间 , 对 三 个 权 值 和 靖 值 各 用 4 位 二 进 制 码 串 表 示 , 恢 次 连接 在 
一 起 形成 一 个 应 用 于 遗传 算法 的 个 体 ,该 个 体 为 16 位 的 二 进 制 码 串 。 各 连接 权 的 
字符 串 值 和 实际 权 值 之 间 有 如 式 (7,98) 关 系 ,其 阔 值 也 有 相同 的 关系 。 
全 门 二 zoominti 门 十 [binreplacefiy7 (2 -1)] 
Xx [smax(a 7 一 zemingi 十 1 
= 一 16+[oa/1s] x33 (7.98) 
式 中 ,binreplace(i) 是 经 过 遗传 操作 后 , 权 值 或 圈 值 的 4 位 二 进 制 码 对 应 的 十 进 制 


数 ,并 用 o 代替。 目标 函数 选 均 方差 值 , 即 g(z)=g(e) = 六 xx[e(i)- 
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e 人 一])】 ,适应 度 函 数 采 用 改进 适应 度 函 数 的 求 取 子 程序 计算 。 
在 执行 选择 .交叉 .变异 遗传 操作 时 ,选择 继承 的 概率 , 即 评价 各 个 权 值 和 闪 
值 ,对 应 适应 度 函 数 的 选择 概率 为 


P, = FLz)/> 廊 (了 (7.99) 


式 中 ,六 为 群体 中 包含 个 体 的 个 数 , 选 N = 如 ,对 该 个 体 为 1 站 位 的 二 进 制 码 串 进 
行 一 点 灾 叉 。 在 实际 训练 中 ,将 选择 概率 较 大 的 20% ,部 前 12 个 个 体 直 接 址 传 给 
下 一 代 。 选 择 概 率 小 于 0.001 的 个 体 随 机 异 变 16 位 中 的 任意 位 。 只 有 选择 概率 
大 于 0.001 同时 处 在 13 以 后 的 个 体 码 串 进 行 一 点 交叉 。 这 样 进行 遗传 操作 后 ,再 
利用 式 (7.98) 将 该 个 体 为 16 位 的 二 进 制 码 串 译 成 相应 的 权 值 和 闪 值 。 然 后 经 过 
sigmoid 函数 激励 

fo = 1AL+ereatn) 


3 
| = 十 ( 四 (站 十 吕 (7.100) 


玉 人 人) 三 政 ， 区 人] 
式 中 ,%( 间 是 单 神经 元 的 输出 ;5 为 第 ; 次 遗传 操作 时 单 神 经 元 的 阔 值 ;ui) 是 直 
接 如 在 被 控 对 象 上 的 输入 值 。 


7.6.3 遗传 神经 解 硬 仿 真 . 实 验 及 结论 


针对 多 变量 贼 烧 系 统 的 其 中 一 个 子 系统 ,其 离散 模型 为 

名 人) 一 下 [入 全 一 1 短信 一 2 一 +eoat 一 1 (7.101) 
式 中 , wait 切 为 相 邻 的 燃烧 点 即 其 他 子 系统 对 该 子 系统 的 影响 , 据 统 计 , 其 为 
幅 值 约 是 (zi) 的 十 分 之 一 的 非 线 性 郴 数 锅 ]。 针 对 上 述 多 变量 燃烧 系统 ,对 于 两 
个 相 邻 的 子 系统 ,利用 MATILAB 语言 (离线 仿真 用 MATLAB 编程 ) 和 CC 语言 结合 
[在 实测 时 及 控制 接口 用 CC 编程 ) ,在 P4-1.8 PC 所 上 仿真 ,两 个 相 邻 的 子 系 统 答 定 
温度 分 别 为 wii=60C ，wa=90T7 , 先 用 常规 的 Pi 算法 ,并 令 式 (7.101) 的 吕 =0， 
仿真 结果 如 图 ?7.14 所 示 ; 然 后 采用 改进 适应 度 函 数 的 遗传 神经 解 克 控制 器 , 令 式 
(7.101) 的 了 =0.05, 仿 真 结果 如 图 ?7.15 所 示 , 图 中 -为 给 定 温度 ; 关 "曲线 为 
子 系统 1 的 输出 vi; oo "曲线 为 子 系统 2 的 输出 yo。 图 7.15 下 图 的 wd 随机 醋 
声 曲 线 是 模仿 子 系统 之 间 态 合 信号 ,代替 相 邻 的 燃烧 点 即 其 他 子 系统 对 该 子 系统 
的 影响 ,分 别 如 在 各 子 系统 中 。 在 网 样 给 定 下 ,采用 改进 适应 度 冰 数 的 遣 心神 经 解 
看 控制 器 对 多 变量 非 线性 系统 解 罚 控制 ,并 实测 温度 , 表 7.2 是 两 个 实际 相 邻 枢 伐 
子 系统 实 测 的 温度 值 。 

以 上 分 析 .仿真 及 炉 群 实验 证 明 ,采用 改进 适应 度 冰 数 的 遗传 神经 解 耦 控制 器 
对 多 变量 非 线性 解 塌 控 制 优 子 传统 的 PI 控制 ,效果 良好 。 


。 322， 系统 韩 识 及 其 MATILAB 仿 碍 
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图 7.14 常规 的 DID 算法 解 神 仿 次 (=O) 寺 图 7.1 改进 站 传神 径 解 克 仿 真 {d =0.05) 


表 ?.2 两 个 实际 相 邻 的 燃烧 子 系统 在 60D .9UD 给 定 下 采用 改进 遗传 神经 解 称 的 芯 测 温度 
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7.7 模糊 神经 网 络 及 其 应 用 
7.7.1 模糊 神经 网 络 原理 及 其 应 用 


1]) 模糊 神经 网 络 概念 

模 精 神经 网 络 (fazzy neural nerwork， 简 写 ENNJ) 系统 从 结构 上 看 主要 有 两 
类 :一 是 在 神经 网 络 结构 中 引入 模糊 逻辑 ,使 其 具有 直接 处 理 模 糊 信 息 的 能 力 ,如 
果 把 一 般 神 经 网 络 中 的 加 权 求 和 转 为 模糊 丈 辑 运算 中 的 ”V"， 人 "4 析 取 : 即 并 、 
取 大 "," 合 取 : 即 交 . 取 小 "), 从 而 形成 模糊 神经 元 网 络 ;二 是 直接 利用 神经 网 络 的 
学 习 功 能 及 映射 能 力 , 去 等 效 模糊 系统 中 的 各 个 模糊 功能 块 ,如 模糊 化 ,模糊 推理 ， 
模糊 判决 。 另 外 ,还 可 以 把 神经 网 络 和 异 糊 控制 用 在 同一 个 系统 中 ,以 发 挥 各 自 的 
特长 。 如 果 把 BP 算法 和 模 柚 理 论 结 人 台 起 来 就 构成 了 上 述 的 第 一 类 模糊 BP 神经 
网 络 fuzzy back propagatior neural network( 简称 FBP), 并 将 这 种 FBP 用 于 对 非 线 
性 随机 本 数 的 学 习 。 仿 真 结 果 表 明 ,FBP 对 非 线性 随机 函数 的 学 习 比 用 BP 算法 
跟踪 精度 高 。 

2) FBP 学 习 非 线性 的 结构 框图 

FBP 辨识 非 线性 的 结构 框图 如 图 7.5 正 向 建 模 结 构 。 从 图 整体 来 寿 ,采用 了 
正 向 建 模 的 并 联 学 习 结构 ,图 中 TDL 表示 具有 抽 头 的 延 时 据 。 从 学 习 非 线性 函数 
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的 方法 来 看 ,采用 前 述 局 部 反馈 的 BP 算法 ,并 在 这 种 邑 神经 网 络 结 构 中 引信 模 
糙 逻 辑 , 使 其 具有 直接 处 理 模糊 信息 的 能 力 , 这 里 把 一 般 BP 网 络 中 的 加 权 求 和 转 
为 模糊 逻辑 运算 中 的 “V"，A "0“ 析 取 ”,“ 合 取 ”) ,从 而 形成 模糊 神经 元 网 络 FBP。 

从 图 的 FBP 并 联 学 习 结 构 可 知 ,模糊 推理 的 结果 大 表示 为 

[ee《 昌 ) 3 下 一 1 ( 才 一 天 十 于 ) 和 下 (天 ) 8( 归 一 上 和， 
中 [下 一 更 十 1 ef 下 (7.102) 

式 中 ,wm 表示 各 层 神 经 节点 的 输出 。 如 果 选 三 层 FBP 网 :输入 为 两 个 节点 , 输 人 
向 量 为 避 =[uwiyaz]-, 隐 层 取 二 级 并 取 六 个 神经 节点 ,两 级 隐 层 的 各 神经 元 节点 
的 输出 分 别 为 yw 和 思 wm ,输出 取 一 个 神经 节点 ,其 输出 为 轨 ，。 显 然 , 神 经 网 络 
输 人 到 第 一 隐 层 的 权 值 阵 wizy 为 2x6 防 矩阵 ,第 二 降 层 的 权 值 阵 wz, 为 6x6 阶 
乍 阵 ,输出 层 的 权 值 阵 ws 为 6xl 阶 打 阵 。 这 种 FEBP 具体 算法 如 下 (输入 量 和 各 
权 值 先 经 过 模糊 化 处 理 ) : 

(1) 求 第 一 隐 层 各 神经 节点 的 输出 


2 7 ZI 六 2 VY il2 太 喇 Ti 
121 20122 Toi21 人 2 全 2 帮 | z3 
TO13] TI132 寻 ] TH31 只 MI 功 莹 央 时 3 
村 宇 耻 计 下 一 马 一 民 一 
141 人 1 于 2 141 zl YY ZDDH2 内 242 全 
151 152 W151 扩 呈 1 Y 说 152 人 2 .5 
ri6 2 VY ze aa| 
YE161 。 162 161 ， 1 和 162 于 2 灾 
(7.103) 


式 中 ,wii 表示 权 值 矩阵 和 和 输 人 向 量 模 糊 乘 法 运算 。 

了 mm 一 昌国 而 
1 1,2.…,6 《7.104) 
式 中 .9 是 将 模糊 量 r; 转化 为 模拟 量 ! 即 解 模 糙 化) 所 加 的 系数 ,在 调试 程序 中 进 
行 摸索 ,其 大 小 和 各 层 权 值 初 始 值 有 关 。 由 于 该 网 络 的 各 屋 权 值 阵 的 韦 始 值 是 根 
据 7.4.3 提 高 神 径 网 络 收 伍 速度 的 一 种 赋 韧 值 算 活 的 方法 设 冒 的 , 据 此 , 式 
(7.104) 的 eg 调 到 5.6396, 式 (7.105) 的 g 调 到 6.4778, 起 (7.106) 的 9 调 到 
0.5163。 

(2) 同 理 可 得 第 二 隐 层 各 神经 节点 的 输出 
1 
1 上 + eg[waiestm] 
(3) 神经 网 络 的 输出 层 输 出 
1 

一 1 二 eeLwaeoam 


《4)》 根据 前 述 降 低 一 类 神经 网 络 灵 人 敏 度 的 理论 和 方法 的 研究 ,在 改变 网 络 权 





ly 一 


了 二 2 (7.105) 


2mm) 一 


了 3 1 二 12 0，7=12 0 (7.106) 


+， 224 ， 系 绩 直 识 克 其 MATLAB 仿真 


值 时 ,针对 学 习 误 差 的 大 小 分 别 对 各 层 权 值 进 行 修 正 ,将 误差 全 反 传 的 BP 网 络 变 
成 局 部 反 传 的 网 络 。 

3) 验证 及 结论 

用 FBP 算 法 和 BP 算法 分 别 对 非 线性 随机 画 数 式 (7.107) 进 行 学 习 验 证 

3 = ai 到) + disinf2rR)A az 十 pieos(2mrk)7 b+T ER) 【7.107) 

式 中 ,系数 al ,az,81,52 均 随 着 学 习 次 数 到 的 变化 而 随机 变化 ;() 为 品 声 。 用 
MATLAB 编程 。BP 算法 学 习 结 果 如 图 7.16 所 示 ,FBP 算法 的 学 习 结 采 如 图 
7.17 所 示 。 


了 ph om( 避 本 各 
和 5 
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图 7.16 HBP 算法 学 习 冉 果 
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图 7.17 FEBP 算法 学 习 结 果 


图 7.16 和 7.17 中 , 横 轴 为 学 习 的 次 数 上 ,图 (a) 中 实 线 为 wp(), 带 "x "的 线 
为 网 络 输出 w (6。 另 外 ,在 学 习 过 程 中 给 输入 上 释 加 0.1 幅 值 的 曲 声 s() ,用 
eg) 的 20 个 离散 值 取 均 值 几乎 为 和 ,说 明 我 们 所 用 的 噪声 5(&) 是 白 唆 声 , 因 此 大 
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识 的 置信 和 度 为 是 %。 

对 FBP 的 理论 分 析 表 明 : 神 经 网 络 中 的 加 权 求 和 转 为 模糊 轴 辑 运算 中 的 
“VY 内 ,可 以 恒 FBP 具有 直接 处 理 模糊 信息 的 能 力 , 同 时 避免 了 加 权 求 和 中 较 
大 数字 的 复杂 和 运算。 在 FBP 中 针对 学 习 误 差 的 太 小 分 别 对 各 层 权 值 进行 能 下 ,全 
反 传 的 BP 网络 变 成 局 部 反 传 FBP, 从 而 ,不 仅 使 网 络 跟 踪 教 师 信 号 的 能 力 加 强 ， 
而 且 使 学 习 的 速度 比 一 般 BP 算法 有 所 可 高 。 图 7.16 和 7.17 的 仿真 结果 进一步 
证 明了 这 一 点 。 


7.7.2 ENN 对 非 线性 多 变量 系统 的 MATLAB 解 耦 仿真 


1) DMFRCNN 的 基本 模型 
针对 燃烧 系统 的 非 线性 多 变量 移 合 特性 ,文献 [65] 担 出 了 一 种 隶属 函数 型 神 
经 网 与 模糊 控制 融合 的 解 朝 方法 (DMFFCNNT) ,图 7.18 为 一 种 隶属 函数 型 模糊 神 
经 网 LDMFFCNN) 基 本 模型 ij ,该 网 络 的 激发 函数 为 正 态 形 函数 
了 
一 cp| 一 

在 图 中 , 必 表 示 网 络 中 (4A) 层 到 (8B) 层 的 连接 权 值 , 邯 清 晰 量 zi 转 化 为 模糊 量 的 
量化 久子 ;网络 权 值 ww. 表示 正 访 函数 的 中 心 值 (m = a); 网 络 权 值 ww, 表示 隶属 函 
数 cfo) 的 分 布 参数 ,又 称 凡 度 因 子 ( = 1 六 了) 表示 激发 5 作用) 函数 。 所 

以 ,隶属 函数 型 模糊 神经 网 模型 的 输 人 输出 映射 关系 为 

一 【 bs 一 re 

Paikzi) = ce 一 


(了 .108) 


《7 了,109) 


CO) 加 ( 人) 
图 7.18 隶属 通 数 型 术 糊 神经 网 模型 


2) DMFFCNN 的 系统 结构 与 方法 

DMFFCNN 系统 结构 中 有 两 个 子 欠 统 相 互 耦 人 台 ,两 个 子 系统 的 输出 和 光 
相互 耦合 影响 ,ya 和 妇 是 子 么 统 工 的 输 人 给 定 和 输出 ;图 7.19 较 详 细 地 给 出 了 系 
统 2 的 DMFFCNN 框图 。 其 中 氏 : .K2 为 子 系统 2 解 三 过 程 输出 和 给 定 的 误差 瓦 
及 其 变化 率 的 比例 因子 ,并 为 DMFFCNN 的 输出 和 实际 系统 的 控制 量 之 间 的 比 
例 因 子 。 子 系统 图 7.19 中 的 虚线 框 DMEEFCNN 结构 为 神经 网 ,其 中 网 络 为 县 有 
双 输 人 单 输出 . 九 个 降 层 节点 的 三 层 网 络 。 第 一 层 : 输 入 层 。 第 二 层 : 语言 项 层 ， 
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图 7.19 DMFEFCNN 系统 的 结构 图 


该 层 使 用 的 隶属 函数 类 似 图 7.18。 上 cs 为 网 络 控制 算法 反 传 的 输出 。 用 正 态 形 函 
数 作 激发 函数 ,根据 式 (7.103) 及 (7.105) ,与 输 和 人 ” 相关 的 第 j) 个 节点 的 输出 为 
> 了 
JE15T21) 二 cxp| - 了 2 | ep|- 了 人 
第 三 层 : 输 出 层 , 先 由 规则 表 求 出 
:IF zi i An xz is 吾 THEN ai 总 
(7.111) 
; 表示 zj 有 = 个 语言 项 节点 ,j) 表示 zz 有 7 个 语言 项 节点 ,ali .az 表示 求 属 函 数 的 
中 心 位 置 ,51; ,52 ,表示 隶 属 函数 的 形状 参数 。 输 出 层 将 前 件 与 结论 连接 起 来 ,得 到 
数值 型 输出 为 


] (7.110) 


DTUzz]= > De fr z2】 (7.112) 


1 并 二 了 
“表示 隐 肢 到 输出 层 的 权 值 , 即 由 模糊 控制 所 得 到 的 结论 值 。DMFFCNN 智能 
解 看 控制 器 作用 到 子 系统 的 离散 控制 量 为 

RD) (一 + 下 TUzriza) (7.113) 
DMFERCNN 的 学 习 方 法 

和 下 十 于) 二 下 《下 了 十 mm- 了 

式 中 , 闸 为 学 习 率 ;) 为 动量 因子 。DMFFCNN 的 学 习 过 程 是 通过 调整 网 络 权 值 
“和 参数 xs; .5 .az ,2a ,使 被 控 过 程 的 输出 值 逼 近期 望 输出 ,因此 定义 误差 香 标 
申 数 为 


jw (7.114) 


了 = 本 ( 吧 一 人 《7.115) 


式 中 , 风 为 给 定 的 期 望 值 ; y 为 被 控 过 程 的 输出 。 网 络 参 数 的 调整 利用 最 速 梯度 下 
降 法 ,学 习 过 程 中 各 参数 计算 如 下 

37 ay(t) 30 -Ka 

aa Fas 2 31i aa li 
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工作 是 族 一 C1; 7y({E) 
= 一 下 个 “ 了 卫 | 全 |， 个 二 一 光 
了 之 于 《1 z2 ) 盏 3 (3 3 3tef 开 ) 
(7.116》 
3 3U 。 (zi 大) 一 GD 
3 瑟 一 一 下 3 32 一 一 FEs5 之 研 w(zuza) 中 {73.117) 
[7 站 2 玖 一 区 
二 0 (zaa)| 于 (7.118) 
aa 9C2) 外 下 呈 5 
aa ar 本 [Se 
昌 5 KR30 3 一 3 2 区 (2 3 全 79) 
9 __ | - 工 于 ( 玫 -2)| 
了 Rs 5 -二 一 下 30exp | 六 | 咏 | 
(7.120) 


综 台 式 {7.112) 一 (7.115) ,再 考虑 式 17,116)] 一 (7.120)} 中 “和 秦 数 al .51、 
az .aa 的 变化 , 便 可 得 到 DMFECNTN 的 动态 学 习 算式 


2 ( 开 十 二) 三 到 (天 ) 十 | Kaamax| 3 一 -| 


aaii， 351， aa 952 3 十 站 胡 计 (十 ) 





{ 了 .1211) 
在 动态 学 习 中 ,根据 式 (7.121) 进 行营 分 运算 ,直到 绅 标 函数 达到 设 定 极 小 值 ,从 式 
《7.121) 可 见 , 每 次 学 习 只 取 晶 标 函 数 J 对 上 述 五 个 变量 求 丛 导 其 中 最 大 的 一 个 ， 
修正 权 值 也 只 修正 对 应 的 一 个 变量 。 这 种 学 习 方 法 比 同样 层 数 和 节点 的 全 局 反馈 
的 BP 网 络 程序 复杂 ,但 由 于 是 有 针对 性 的 修正 权 萌 ,计算 工作 量 并 未 增加 ,因此 ， 
训练 速度 有 所 提高 。 
例 7.,3 具有 耦合 的 两 个 相 邻 子 系统 的 差分 方程 为 
人 一 灵 站 中 直 一 臣 十 古人 (请 一 1 十 直下 一 2 十 去 人 是) 十 3 县 ) 
2 一 21E 人 一 1) 十 下 2 下 一 下 十 Bat 瑟 一 2 十 苹 信 开 ) 十 92 人 开 ) 
《7.122) 
式 中 ,如 () 随 机 紧 声 ;yy (0 ) 为 两 个 相 邻 子 系统 之 同 的 三 合 ; 采 用 隶属 枉 数 型 神经 
网 与 神 糊 控制 融合 的 解 硬 方法 (DMFECNN ) 实 现 解 三 控制 。 
解 ”分析 :;NN 作 控 制 器 和 NN 作 辨 识 器 的 主要 区 别 是 ,前 者 将 NN 的 输出 作 
用 给 被 控 系 统 ,系统 的 输出 y 和 理想 输出 吧 比 较 , 后 者 将 NN 的 输出 和 和 教师 信 
号 加 比较 ,两 者 均 根 据 比 较 的 差 值 修正 NN 的 权 值 。 
将 给 定 系数 代 人 到 式 (7.122) ,编写 的 程序 :FLeh7FNNesg3.m, 程序 太 大 有 
620 多 行 不 恒 写 出 , 附 在 光盘 中 并 加 有 注释 。 在 程序 中 , 两 个 相 邻 子 系统 的 差分 方 
程 写成 
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yY2=0.5 ylL+2.S 2+2.9 UL+Tnlt tk)+D0O.D01 yl2 

y22=0.9 y12+1.25 ti02+1.29” ul2z+nt +0O.01 ”yl 
式 中 ,nlf: ,和 ntf: ,k) 分 别 为 用 n= 0,.28* rand(sizeftime)); nl =0.3*randf size 
[time)); 产 生 的 两 个 子 系统 的 随机 噪声 。 程 序 运行 结果 如 图 7.20 所 示 。 


The deceupling by FMNN azorithm 


一 一 spisSUBL-inPui 
xz ESUB1-decoupling 
一 一 和 2 1 SUB2-ingtt 


> YaSUB2deeoupling 
一 一 sisetreorl 
一 E22 is error2 





7P7 and 下 272 














图 了 .20 异 糊 神经 网 络 FMNN 对 相 邻 加 人 台子 系统 的 解 看 结果 


两 个 子 系统 初始 化 ,给 相同 隶属 本 数 型 FNN 的 中 心 值 . 尺度 因子 和 权 值 阵 赋 
值 恕 下: 
al02=[-202]iall2=[-202];a202=[-202];a2l12=[-202]; %EFNN 
隐 层 的 权 值 阵 , 即 中 心 值 , ali 和 a2i 是 分 别 对 应 两 个 输 和 人 xl 和 双 的 隶属 男 数 的 
中 心 值 ; 
bl02=[1.51.51.S$]; hlt2=[1.51.51.5];，b202=[1.51.51.5];， 了 212= [1.5 
1.51.5]; % 尺 度 因子 , bli 和 b2i 是 分 别 对 应 两 个 输 人 xl 和 闻 的 隶属 函数 的 斥 
度 因子 ; 
w2=[-1 -0.5 -0.5 -0.500.5;0.50.51]; vt2=[-1 一 0.5 一 0.S; 一 个.5 
00.5;0.50.5 1]; %FNN 和 输出 层 权 值 阵 ,v02 表示 辐 ( 人 一 1)iv12 表示 wz(kj)i 

程序 运行 结果 FNN 模型 的 参数 ， 

子 系统 1 运行 结果 FNN 的 中 心 值 .尺度 因子 和 权 值 阵 ; 
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att= -5,4905 0.0016 -0.0039，a21= -0.1085 -0.0010 -0.0001 
bll=0.9576 ”5.4020 ”4.3817; bt1=5.4539 7.0620 ”3.6550 
w3 三 

-1.7t00 -1.2100 -1 工 ,2100 

-1.2100 -0.7100 -0.2100 

-0.2100 -0.2100 0.2900 

子 系统 2 运行 结果 FNN 的 中 心 值 .尺度 因子 和 权 值 阵 ， 
all2= -3.74S0 -0.0031 0.2719， ， a212 = -2.5444 0.0007 0.2126 
b112=0.2495 1.4999 3.7133; ”BDI2 = -0.1431 1.5000 3.4497 
vl2 三 

-1.5411 -1.0411 一 1.0411 

-1.0411 -0.5411 -0.0411 

-0.0411 -0.0411 0.4589 


7.8 小 结 


本 章 主 要 探讨 神经 阿 络 辩 识 的 理论 .方法 及 其 神经 网 络 辨 识 MATLAB 仿真 。 
在 7.1 一 7.3 节 中 ,介绍 了 神经 网 络 辨识 的 基本 概念 ,其 中 包括 神经 网 络 的 模型 分 
类 ,激发 函数 .学 习 方 法 及 和 转 点 .神经 网 络 模型 瓣 识 中 常用 结构 .辨识 中 常用 BP 网 
络 训练 算 法 等 。BP 算法 在 系统 辨识 中 得 到 了 最 广泛 的 应 用 ,但 由 于 BP 算法 是 基 
于 梯度 下 降 靶 的 思想 ,常常 具有 多 个 局 部 极 小 点 。 因 此 BP 训练 时 会 出 现 很 多 问 
题 ,诸如 不 收 令 .训练 速度 慢 或 精度 不 高 等 。 为 了 克服 这 些 问 题 ,7.4 节 探 讨 了 改 
进 的 BP 网 络 加 练 算法 ,其 中 包括 基于 降低 网 络 灵 敏 度 的 网 络 改进 算法 .提高 一 类 
神经 网 络 容错 性 的 理论 和 方法 、 提 高 神经 网 络 收 伍 速度 的 一 种 赋 初 值 算 法 及 其 他 
网 络 训练 技巧 。7.5 节 是 神经 网 络 辩 识 的 MATLAB 仿真 举例 ,其 中 包括 对 开发 的 
具有 噪声 二 阶 系统 辨识 的 MATLAB 程序 的 前 析 、 对 多 维 非 线性 辨识 的 MATLAB 
各 序 的 剖析 ,前 者 采用 7.4.1 所 述 的 改进 的 BP 算法 (MBP) ,在 常规 的 BP 周 络 中 
增加 协调 器 ,激发 画 数 采用 sigmoid 函数 ;后 者 由 于 样本 幅 值 是 正 负 变化 的 ,因此 ， 
激发 数 采用 对 称 的 sigmoid 函数 或 称 双 曲 函 数 ,采用 改进 的 BP 算法 , 即 由 协调 
器 来 协调 各 层 权 值 修正 ;另外 ,在 修正 权 值 时 考虑 积累 误 姜 。7.6.7.7 节 分 别 讨论 
基于 改进 遗传 算法 的 神 既 网 络 和 模糊 神经 网 络 及 其 应 用 ,并 列举 了 巡 传 神经 解 耦 
仿真 及 实验 结果 .FNN 对 非 线性 多 变量 系统 的 MATLAB 解 看 仿真 编程 方法 及 其 
开发 的 程序 ， 
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习题 


. 生物 神经 元 模型 的 结构 功能 是 什么 ? 

. 人 工 神经 元 模型 的 特点 是 什么 ? 

,从 工 神经 了 岁 络 的 特点 是 什么 ? 如何 分 类 ” 

. 有 哪 岂 种 常用 的 神经 网 络 学 习 算 法 ? 

,，BP 算法 的 特点 是 什么 ? 

, 增 大 权 值 是 否 能 够 使 BP 学 习 变 慢 ? 

,系统 参考 横 型 为 y( 有 = 一 1.2y( 一 1)+0.73( 开 一 2) 十 ( 下 一 1 十 0.St( 天 一 
2)+0.16(0)，E(e) 为 幅 值 小 于 1 的 随机 噪声 , 试 分 别 采 用 3-6-1 型 BP 神经 
网 络 和 改进 型 的 MBP 网 络 因 识 系统 的 模型 ,编写 系统 模型 辨识 程序 ,打印 出 程 
序 运行 结果 ,并 分 析 采 用 常规 BP 算法 和 MBP 算法 办 识 该 系统 模型 的 收 敏 速 
度 和 辨识 精度 。 

8, 模糊 神经 网 络 控制 系统 原理 结构 如 题 $ 医 所 示 , 图 中 汉 为 系统 期 望 输出 (单位 

阶 茎 信号) ,y 为 系统 输出 ,被 控 对 象 的 传递 隔 数 为 

玫 1 22 


一 这 一 


-~ 台 1 习 ho 一 


48065 








四 


全 (5 二 


Tis+ 人 “1600s+1 








是 8 图 模糊 神经 网 络 控制 系统 仿真 结构 示意 图 


设计 如 题 8 图 所 示 结 构 的 模糊 神经 网 络 控制 器 FNNC。FNNC 模 型 为 
展 : IE ziis4isandzrzis ATHEN AP is 一 1,27 
式 中 ,4 个 = [NB,NM,NS,ZE,PS,PM,PB] ,隶属 函数 为 高 斯 冰 数 ; 
5= [NB,NM:,NS,ZE,PS,PM,PB] ,隶属 函数 为 高 斯 画 数 。 
各 挛 量 论 域 :Xi= [一 下 ,+ 五 ]=[ 一 3,.+3]，X2=[ 一 尼 , 十 五 ] = [ -1.5,+1.5] 
6 


rr=|-w,+ue=[-0.5,+0.5]， Ki = el= 二 = 全 2 
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扣 折 中 ,5 
下 2 二 2 二 AT 4， 全 3 一 站 
初 值 :rz (0) = | 一 6 -4 一 2,0,2,4;61 ,tt0)= Lir(0)=2;ro(0)=4。 
在 对 系统 施加 人 慢 时 变 裤 动 di = cisin 10.0314&) 和 随机 噪声 干扰 as = 
carandnf AT,1) 的 情况 下 , 试 求 系统 输出 y, 试 用 MATLAB 语言 编写 系统 计算 


机 仿真 程序 ,并 打印 出 仿真 结果 。 


第 8 章 非 线 性 动态 系统 的 其 他 辨识 方法 


非 线性 系统 是 广泛 存在 的 ,严格 地 讲 , 斤 平 所 有 的 实际 系统 都 是 非 线性 系统 。 
在 工程 中 ,很 密 非 线性 系统 都 可 以 用 线性 系统 足够 好 地 近似 ,但 对 非 线性 程度 严重 
的 徐 统 必须 采用 特殊 的 方法 来 处 理 。 除 了 前 面 讨 论 的 非 线性 辨识 方法 以 外 ,还 有 
一 些 其 他 的 处 理 方 法 。 本 章 主 要 讨论 非 线 性 离散 时 间 动 态 系 统 的 辨识 问题 。 关 于 
非 线性 动态 系统 的 辨识 问题 ,一 般 可 以 通过 最 优化 方法 来 解决 ,读者 可 参阅 有关 书 
籍 ,这 里 不 再 乾 述 。 

非 线性 系统 类 型 很 多 ,不 可 能 由 一 种 辨识 理论 来 解决 所 有 非 线性 系统 辨识 问 
题 , 因 此 必须 针对 不 阿 的 非 线性 系统 分 别 来 研究 其 辨识 问题 。 

不 同 交 型 的 非 线性 系统 可 以 用 不 司 的 模型 来 描述 ,其 中 最 重要 的 一 类 模型 是 
非 线性 微分 方程 或 差分 方程 模型 。 这 类 模型 的 特点 是 :可 以 通过 物理 规律 直接 地 
或 经 过 某 些 近似 后 自然 地 得 到 模型 ;在 数值 上 肉 易 处 理 ; 符 人 台 节 省 参数 的 原则 。 其 
他 一 些 重 要 的 已 研究 的 非 线性 模型 是 ; 

(1) 用 Volterra 级 数 展 开 表 示 的 密 项 式 系 统 ; 

【2) 会 有 无 记忆 非 线 性 的 Hammerstein 模型 ; 

(3) 双 线 性 系统 模型 ; 

(4) 解析 -线性 (analytie-linear) 系 统 模型 ; 

(3 交 = 让 xc) xzERz 型 的 自治 非 线性 模型 等 。 

另外 ,还 有 有 一些 特 殊 类 型 的 非 线性 系统 模型 ,如 继 电 式 、 滞 环 .极限 圈 及 混 惩 运 
动 等 。 特 别 指出 ,用 于 系统 辨识 的 神经 网 络 加 上 训练 后 的 权 值 和 阔 信 参数 也 可 以 
表示 被 辨识 系统 的 模型 。 

目前 ,针对 不 同类 型 的 非 线 性 模型 已 提出 了 不 少 辩 识 方法 。 由 于 非 线性 系统 
的 复 奈 性 ,用 于 辨识 的 数学 工具 也 是 多 种 多 样 的 ,有 的 还 相当 这 奥 。 限 于 简 幅 这 里 
只 能 介绍 两 种 比较 典型 的 非典 型 模型 的 辨识 方法 。 


8.1 Volterra 级 数 的 表示 及 其 辨识 方法 


用 多 阶 脉 神 响应 表示 的 Volterra 级 数 可 对 一 类 广泛 的 非 线 性 过 程 给 出 相当 一 
般 的 非 参 数 表 达 式 。 下 面 推导 非 线性 系统 Volterra 级 数 的 表达 式 [7 。 
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8,.1.1 非 线性 系统 Volterra 级 数 的 表示 


考虑 有 记忆 的 非 线性 过 程 。 假 定 , 当 :<0 时 , 输 大 信号 xft)=0, 此 外 还 假定 
这 个 记忆 是 有 限 的 , 亦 即 系统 以 前 的 输入 对 目前 的 输出 是 有 影响 的 ,但 是 当 r 足 
够 大 时 ,xf 人- rz) 就 不 再 对 响应 y(t) 产 生 影 响 了 。 这 些 假定 自然 满足 过 程 的 稳定 
性 和 物理 可 实现 性 (但 是 ,一 个 理想 的 积分 .an 
器 是 有 无 限 记忆 的 )。 过 程 输 人 量 可 以 通过 
共有 有 限 面 积 的 矩形 脉冲 来 近似 ,如 图 8.1 
所 示 。 以 时 间 问 隔 At 为 周期 ,对 r 委 如 时 ， 
从 zf 世上 得 到 的 采样 值 分 别 记 为 az、w 因 
avwo RN 应 该 选取 得 足够 天 ,使 当 王 > 和 
时 ,ax 将 不 再 影响 (50) ,于 是 响应 yf:o) 便 
被 近似 为 N 个 变量 的 函数 Faiyaay…， 
xs)。 设 yw0) = F0;0,…)=0, 利 用 多 维 泰 
勒 级 数 在 零点 处 展开 ,我 们 得 到 (对 某 一 时 
刻 妇 系 统 的 输出 为 


六 【有 =【《a121 十 Ga&2 十 … 十 灵 NEND) 





匣 8.1 输入 攻 用 矩形 脉冲 才 示 图 


+{( ait + aalaz 二 … 十 CNNEA) 
+《aillai 十 Ci2321a223 十 … 十 QNNNUN) 
-也 旭 ; 中， 十 > > 他 站 2 十 之 > > 全 :臣下 2 十 
三 机 后 十 沪 qaadr 十 呈 ob 二 和 (8.1) 
式 (8.1) 称 为 Kolmogcerov-Gabor 多 项 式 , 式 中 ,表示 y 的 近似 值 ; 表示 织 
性 项 求 和 ,yy,yas 分 别 表示 二 次 项 求 和 及 三 次 项 求 和 。 在 前 面 已 经 指定 的 条 件 
下 ,如果 At 比 系统 时 间 常 数 小 , 则 >( 昌 和 70t) 非 常 近似 。 


若 使 所 有 的 ar 和 4 为 堆 , 则 仅 秋 yis = > uv ,这 是 对 线性 过 程 的 卷 积分 
的 近似 。 

这 可 做 如 下 说 明 : 

令 本 =iAr ,其 中 旋 是 脉冲 高 度 ,Ar 是 脉冲 宽度 ,因此 


ii) = 页 1ETAt 十 下 282Ar 十 … 一 > Pear (8.2) 


考虑 到 图 8.1 中 上司 的 编号 方 问 , 妆 A: 一 0， Neo 区 及 NAr= 与 时 ,此 式 变 
为 
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JE) -外 严 放 reECEn 一 rjdr 【名 .31) 


这 里 Ar) 表示 系统 的 一 阶 响 应 ( 核 ) ,相当 于 线性 系统 的 脉冲 响应 。 若 使 两 
个 脉冲 加 到 系统 上 ,那么 对 于 线性 和 的 作用 遵循 释 加 原理 
FA 十 六 20 人 《有 .4) 


但 在 平方 和 ,立方 和 等 和 式 中 ， 脉冲 辣 的 相互 作用 同样 是 明显 存在 的 。 假定 ， 
必 二 上 AtAt, 则 对 yu 的 作用 是 
Pt2AtAt 二 DUALEAL 二 FIAE (8.5) 
对 yuas 取 极限 则 变 成 
了 quadr(tn》 二 | | 关 2 (riyr2)2Ct 一 rt)aCio0 一 rzjdridr2 《 呈 .) 


在 这 种 情况 下 
了 《CE) = in 二 quadtkt) 十 多 bt 十 入 (8.7) 
就 变 为 Volterra 级 数 


人 -| ra 一 工 )dz 
+ 疡 区 二 FE E 一 7 一 3 ) 虽 工 ] 台 rr3 


+ Rasfriyzayr)aft- za 人 zt)att 一 zs)dridrzdra (8.8) 


所 以 用 Veiterra 级 数 来 描述 非 线性 过 程 , 是 用 卷 积分 描述 线 任 过程 的 直接 推广 , 线 
性 系统 的 脉冲 响应 ifr) 补 各 阶 脉 冲 响 庶 5 核 ?和 【z) , 产 隐 zl，T20 内 所 1 4 xj) 等 
所 了 歌 代 。 这 里 称 六 为 第 ; 阶 脉冲 应 , 称 积 分 


网 了 | 丰 [isT2y 一 Ti 人 一 fdrl1…dr ， (8.9] 
为 第 次 活 函 。 
8,1.2 Volterra 级 数 的 办 识 


假定 非 线 性 系统 是 稳定 的 ,并 具备 有 限 的 建立 时 间 , 亦 即 该 系统 为 有 限 记忆 
的 ,为 了 辨识 内 核 屿 (rt zy rs》 需 把 Volterra 级 数 离散 化 , 即 用 它 的 采样 数 
据 形 式 近 似 


VE = > ja 下 Da 一 用 
本 1] 一 下 下 下 一 门 汪 下 一 让) 十 《8.10) 


一 灿 了 一 恬 严 关 


式 中 ,大 洋 采样 周期 为 开 ; 内 = AT DT 是 建立 时 间 ;Rti) =(r= 打开， 
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Ai 站 =Rtri=iTrz= 亲 ) 生 ,等 等 ,为 了 简 0 
化 起 见 ,在 趟 (8.10} 中 省 略 了 工 。 二 

现在 的 目标 就 是 从 输入 输出 数据 序列 w (有 ) 区 
和 (站 中 估计 出 大 (站 几 ( 于 用 等 。 这 种 全 讨 可。 困 》 天 各 相让 才 昌 下 
以 很 罕 易 地 用 参考 文献 [72] 第 4 章 中 的 分 阶段 最 
小 二 息 估 计 来 得 到 。 如 果 取 Volterra 级 数 的 前 两 项 来 近似 ,并 假定 系统 输出 端 受 
干 拓 , 即 如 图 8.2 所 示 , 则 





(天 ) 一 在 I( 克 和 十 吕 ( 玫 ) (8.11) 

式 中 ,0 是 附 如 的 随机 噪声 ; 
入 开 )》 二 (一 太 ) 22 天) 让 (二 Je( 开 一 直入 2( 天 一 力 )] 《8.12) 
和 I 一 [及 (0)… 天 ( 记 ) :下 (0 0) 下 (0.1)… 正 ( 户 , 力 )] (8.13) 
令 J= > wu2z(8) 趋 于 最 小 , 则 从 式 (8,11) 可 得 bg 的 最 小 二 乘 估计 。J 的 求 和 式 中 
&=T,2N，N>dmg。 关 于 0 的 详细 解法 可 参阅 文献 171] 第 6 章 非 线性 控 
制 系 统 的 频 域 分 析 , 先 找到 Volterra 级 数 和 广 尽 频率 响应 (generalizeq frequeney e- 
Sbponse function, GFRE) 的 对 应 关系 ,然后 用 非 线性 系统 的 GERF 递 推算 法 求 
Volterra 的 内 核 央 (rz 并 脉冲 响应 ); 对 多 输 人 多 输出 (MIMO} 系 统 , 可 采用 MIMO 
非 线性 系统 的 GFREM 递 推算 法 求 矩 阵 形式 的 Velterra 的 内 核 再 (fr) , 即 求 出 了 多 

变量 系统 的 怠 冲 响应 - 


8.2 复杂 系统 的 混 泪 现象 及 其 辩 识 


混沌 是 非 线 性 系统 的 通 有 行为 ,控制 过 程 出 现 混沌 现 篆 是 不 可 避免 的 。 而 且 
控制 系统 中 经 常 含有 不 确定 的 因素 ,因此 非 线性 控制 系统 比 非 线性 自治 系统 更 为 
复杂 ,很 容易 出 现 混 污 现 象 。 控 制 系统 的 湿 沌 运动 来 自 三 个 方面 ,一 是 非 线 性 控制 
系统 本 身 的 混沌 。 二 是 控制 算法 带 来 的 混沌 ;三 是 系统 离散 化 引起 的 混沌 。 右 系 
统 模型 用 状态 方程 来 描述 ,对 定常 系统 而 言 ,只 有 三 阶 以 上 的 系统 能 够 产生 混沌 。 
而 对 于 时 变 系统 能 够 产生 混沌 至 少 需 二 阶 ;但 一 阶 时 间 延 迟 系统 就 可 能 有 复杂 运 
动 行为 。 

文献 [71] 的 第 5 章 措 出 : 诠 乞 的 控制 完全 不 同 于 常用 的 控制 问题 , 它 有 两 层 意 
思 :一 是 确实 消除 了 混沌 ,使 系统 稳定 到 期 望 点 或 期 望 的 轨道 ; 另 一 层 含 义 是 抑 
制 混沌 ,将 其 幅 值 减少 到 期 望 的 范围 之 肉 。 混 汪 的 同步 属于 混沌 的 控制 范围 , 它 
是 在 给 定 的 相 空 间 锁 定 相 轨 迹 , 即 混沌 的 同步 是 控制 的 轨迹 跟 肾 期 望 轨 计 的 一 失 
特殊 控制 问题 。 


“3 ， 系统 饼 识 及 其 MATLAEB 仿 真 


8.2.1 反馈 系统 和 忧 化 过 程 中 的 混沌 现象 
1. 反 错 控制 引起 的 混沌 


考虑 具有 反馈 延迟 的 离散 控制 系统 
3641 二 7 站 TREE 《8 .14) 
其 相应 的 财 环 系统 将 
zt = 大工 曲直 RCR rr) = 下 (ceitr) (8.15) 


延迟 系统 比 相应 的 无 延迟 系统 具有 更 丰富 的 动态 符 性 。 文 献 [71] 通 过 研究 一 类 一 
次 映射 来 加 以 说 明 。 考 不 


Faziy =1 -az xm-r) = pre-r (8.16) 

取 a=1.4, 五 =0.3, 则 
ff 天 和: mi 二 一 .4z8 十 yat 一 章 3 《8.17) 
r=0:zii 三 1 -4.4z+03z Fe) (8.18) 


先 研 究 无 延迟 系统 式 (8.18) 的 动态 特性 。 容 遇 求 得 它 有 两 个 不 动 点 zl =0.63， 
z2= 一 [13, 且 均 不 稳定 (排斥 子 ) , 故 系 统 式 (8.18) 不 会 收 伍 于 一 点 。 
定理 8.1 系统 式 ({8.18) 当 初 值 r< xz 或 >z 时 发 散 , 其 中 关 =1.77。 
可 以 证 明 , 系 统 式 (8.18) 具 有 不 变 区 间 [= [zz ,在 工 上 非 所 扑 传递 。 
利用 大 量 仿 真 数 据 可 算得 系统 式 (8.18) 在 了 内 的 Lyapunov 指数 和 0, 故 它 
不 可 能 旦 混沌 态 。 但 它 在 工 内 不 收 和 全 于 一 点 ,又 不 发 散 , 故 只 能 是 周期 或 拟 圆 所 
运动 。 
再 考虑 延迟 系统 式 18.17)。 取 *=1 时 便 得 到 著名 的 Henon 映射 ,而 Henon 
映射 是 混沌 的 ,可 见 , 反 馈 延 迟 引 起 了 记 沌 动态 行为 。 


下 面 讨 论 和 连续 非 线 性 闭环 系统 
卫 一 天 [ 工 ) 十 起 
( 归 ， 
wz) 1 
式 (8.19) 可 改写 为 
艺 玉 了) 二 gt) 人 FIOrzrrl (8.20) 


式 中 ,zc=xztt-zr)。 设 z "是 式 (8.20)? 的 一 个 平衡 点 ,在 xz "附近 展 成 泰勒 级 数 
并 保留 到 一 次 项 ,可 得 


习 一 Qz 十 由 rw。 (8.21) 
， 
式 中 ,==xz-z'va= 下 | 6= 生 | 。 .。 则 式 (8.20) 在 = 附近 的 局 部 和 








下 字 : 一 卫 


定性 可 由 研究 式 (8.21) 得 到 ,对 此 有 如 下 所 述 主要 的 结果 : 
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定理 8.2 设 式 (8.21) 满 足 :个 18 < | ,或 轩 1 昌 > | ,rc<arooocs( 一 aA6)， 
v 呈 - 妈 时 , 则 Retay<0, 此 时 ,z* 即 为 式 (8.20) 的 一 个 局 部 渐 近 稳 定 平衡 点 。 

若 有 |8|<|al, 则 由 该 定理 立即 得 出 , 当 r 六 arceos( -ev 本 一 惰 时 , 平 
衡 点 将 失 稳 ,从 而 使 得 式 {8.20) 的 动力 学 变 得 复杂 起 来 。 随 着 延迟 时 间 的 增加 , 系 
统 将 表现 出 从 振荡 直到 混 济 等 一 系列 复杂 的 动态 。 因 此 , 对 于 任何 实际 的 反馈 控 
制 系统 , 当 系 统 中 存在 着 明显 的 非 线性 时 ,设计 控制 算法 必须 考虑 完成 该 算法 所 需 
的 时 间 , 它 应 使 系统 总 的 延迟 时 间 不 超过 上 述 定理 所 界定 的 范围 。 


2. 动态 系统 优化 引 赵 的 混沌 
考虑 一 类 带 参 数 ea 的 非 线 性 动态 系统 
1 二 三 (下 二 和 1 2 (8.221 
式 中 ,下 :R 一 R,aED 为 待 优 化 的 参数 ,有 是 容许 参数 集合 。 对 系统 式 {8.22) 的 参 
数 ea 进行 优化 , 即 求 出 某 一 sa=ae “E 吕 使 目标 函数 了 最 优 。 比 如 定义 了 为 
mmaxj 一 > Fayzi) (8 .23) 
该 优化 问题 的 直接 解析 求解 可 利用 拉 格 间 日 匀 子 法 和 离散 变 分 法 ,也 可 进行 
数值 计算 。 讨 论 优 化 问题 时 常 把 注意 力 集 中 于 优化 目标 上 而 忽视 系统 的 动态 行 
为 。 当 








1 二 下 (GT 下 二 站 二 ,2 (8 ,24) 
这 是 一 维 选 代 映 射 , 其 稳定 性 和 动态 行为 可 应 用 文献 [7 菇 的 第 2 和 第 3 章 的 中 心 
流 形 定理 及 结构 稳定 性 的 方法 加 以 处 理 。 不 同 的 参数 a 往往 得 出 不 同 的 目标 值 ， 
也 可 能 导致 完全 不 同 的 动态 行为 ,甚至 出 现 混 沌 。 下 面 举 两 例 说 明之 。 
考虑 典型 系统 


ztl = Rat = art(l 一 zzro= 0.44 = [1,4] (8.25) 
取 maxJn = 次 时 ,ea 兰 3.709, 对 应 的 maxJl = 67.777。 者 取 maxyi = >、 7 
进行 优化 ,也 能 得 到 几乎 同样 的 ” ,在 4 内 (Ji 一 ai=1,2) 的 仿真 表明 ,在 < = 
a* 时 ,i = 1,2 两 种 情况 均 出 现 混沌 。 
3. 采样 控制 系统 的 分 贫 与 混沌 


有 许多 原因 导致 连续 系统 的 离散 化 ,如 计算 机 控制 .数值 计算 等 。 用 离散 化 技 
术 处 理 连 续 系 统 时 离散 步 长 或 周期 是 一 个 重要 参数 , 它 对 信号 恢复 和 系统 稳定 性 
等 都 有 一 定 影响 。 这 里 从 动态 系统 理论 的 角度 来 研究 这 一 问题 

考虑 一 维 非 线性 反馈 控制 系统 


33- 系统 具 识 六 其 MIATLAB 人 坊 真 








元 = 7 了 )ATat)， (二 让 全 ) (8.26) 
其 于 环 控制 系统 为 
羡 = 拓 字 ) 十 让) 全 CGOz) (8.27) 
可 采用 多 种 方法 将 连续 系统 式 (8.27) 离 散 化 ,一 种 简单 的 前 向 差分 法 表示 为 
se (1 一 天 )/ 了 人 ) = 下 (8.28) 
式 中 ,T 为 采样 局 期 。 于 是 ,闭环 系统 式 (8.27) 近 似 为 
1 二 TGSFUEE TD 玫 二 12 (8 ,29) 


容易 证 明 ,系统 式 48.27) 的 平 衔 点 zx“ 即 为 相应 离散 系统 式 (8.29) 的 不 动 点 二 ,并 
且 : 若 xz" 不 稳定 , 则 习 不 稳定 ; 若 只 稳定 , 则 xz 稳定 。 随 着 采样 周期 了 的 变化 ， 
离散 系统 式 (8.29) 呈 现 出 比 连续 系统 式 (8.27) 更 为 丰 寅 的 动态 特性 ,如 奇异 吸引 
子 和 滥 沌 等 。 

定理 8.3 “” 当 系统 (8.29) 的 不 动 点 坟 满足 GT)S0O 时 ,大 0<T< -27 
Gaz 门 , 则 芯 稳 定 ; 若 工 > -27Gz 门 , 则 不 稳定 。 

证 上 明 因 Gfz 门 <0, 故 当 0<TX -25 或 开 > -2701z0 时 ， 
[ECz) = 11+TG CCz) | 分 别 为 <1 和 >1, 于 是 由 稳定 性 定义 . 知 z 分 别 是 稳 
定 的 和 不 稳定 的 。 

定理 8.4 ” 当 系 统 (8.29) 的 不 动 点 坟 满足 GOm)<0 时 , 耕 工 由 小 到 大 穿 
越 工 = -27G(z) , 则 系统 产生 分 贫 。 

下 面 通过 一 个 实例 ,分析 采样 周期 了 变化 引起 的 分 贫 和 混沌 的 机 理 , 设 


了 = 一 = (>0，>0，5>0 (8.30) 
进而 设 反 馈 系 数 c=a 一 5 , 则 式 (8.27) 和 式 (8.29) 分 别 写 成 

字 = afza-x)= CCz) (8,.31) 

zi = 玫 二 了 [ea 一 革 = 下 (zt 了 IT) (8.32) 


系统 式 48,31) 有 三 个 平衡 点 妇 =0,xz3= 土 1, 且 妾 稳定 而 好 3 不 稳定 。 而 式 
《8.32) 有 三 个 不 动 点 对 = 玫 人 =1;,2,3), 并 且 好 3 不 稳定 。 若 采样 周期 了 由 小 到 
大 穿越 了 = -27a , 则 寺 由 稳定 变 为 不 稳定 (定理 8.3) ,产生 分 色 ( 和 证 理 8.4)。 

定理 8.5 “” 当 采样 周期 T=4/a 时 ,离散 控制 系统 式 (8.32) 在 不 变 区 间 工 = 
[ -1,1] 内 呈 混 沌 状态 ,证明 见 文献 [71] 的 5.2 他。 


rn 8.2.2 基于 控制 理论 的 混沌 分 析 方 法 


传统 的 控制 理论 也 可 以 用 来 处 理 控制 系 
统 中 的 混沌 现象 ,下面 介 绍 如 何 利用 描述 天 数 
分 析 混 沌 。 
图 8.3， 非 线性 反馈 控制 系统 对 于 如 图 8.3 所 示 的 一 类 典型 的 非 线性 
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控制 系统 为 
CCD)= 多 二 83 的) [8 .33 
了 十 QQns 十 二 
式 中 ,为 大 于 和 零 的 可 调 增 益 。 么 统 的 平衡 点 可 由 下 述 方程 得 到 
?+COOFroy) = 0 (8.34) 
设 它 的 解 是 >= 王 ,=1,2,…。 现 设 >=0, 做 如 下 候 设 : 
假设 8.1 系统 输出 形式 为 %( 巧 = 和 +TBsinwt ( 品 >0,ow>>0)。 
很 设 8.2 。 非 线性 输出 , 即 FL yott] 可 由 息 里 叶 级 数 展开 成 
Fi) = FA,B,ao)+ > [ER(A,B,a)singot + Frrf(A, Ba)coskar ] 


是 研 


(8 ,35) 
式 中 ,Fu ,Fk 是 相应 的 谐 波 系数 。 忽 略 式 (8.35) 中 的 高 次 著 波 ,得 
0 一 FE07LA， .NI 一 【了 JR + ji 
1 区 
No , 吕 ) = 5 天 4+ 呈 sinop]de (8.36) 
工 _Pr 
NA 了) = -| 天 册 十 再 sinjdo {8.37) 


分 析 表 明 , 当 系 统 的 极限 环 和 具有 稳定 特征 的 平衡 点 产生 交互 作用 , 且 系 统 具 
有 一 定 的 凄 波 作 用 时 ,反馈 茶 统 会 产生 混沌 运动 。 
定理 8.6 ”Lur'e 非 线性 反馈 系统 当 其 极限 环 和 平衡 点 相互 作用 时 ,系统 能 
够 产生 混沌 的 近似 必要 和 荣 件 为 
王 | 一 上 | (8 .38) 
对 实际 的 Lur'e 非 线性 反 司 系统 ,可 按 下 列 步 又 分 析 其 混 郊 天 象 
(条 解 ATIL+GONA,B)]=0 和 1+Gljo)wa,Bi=0 可 得 极限 环 
2= 为 (四 存在 的 条 件 ; 
(2) 解 方程 y+ G(0)Fy)=0 得 系统 的 平衡 点 ?一 玉 一 1 2 
(3) 由 劳 斯 判 据 和 这 硅 斯 特 稳 定性 判 据 可 获得 平衡 点 和 极限 环 的 稳定 性 ; 
(4) 由 加 ( 乓 = 和 +sinot , 吾 六 | 下 -各 |, 即 可 得 到 极限 环 和 平衡 点 相互 作 
用 的 条 件 。 
若 图 8.3 中 非 线性 反馈 环节 取 为 FLy(t]= yb ,前 向 通路 环节 为 
开 (S2 十 由 8 十 五 
CT 
5 十 你 35 十 机 2 十 好 1 
可 解 得 茶 统 的 输出 平衡 点 为 
玉 | = 一 /一 3a17 由 )， 有 =0， 有 ) 一 一 一 3al7 有 | ， 下 0， ojbic<n0 
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由 于 它 为 三 阶 系统 ,从 而 可 能 出 现 复 末 运 动 行 为 。 此 时 系统 的 闭环 极点 其 有 
以 下 特征 : 实 部 有 正 有 负 ;无 零 实 部 极点 ( 即 鹿 轴 上 雹 极点 ) 所 有 极点 之 和 小 于 零 ; 
存在 介 共 箔 极点。 这些 保 证 了 系统 是 耗 散 的 ,具有 有 界 、. 总 体 吸 引 、 局 部 排斥 等 特 
性 。 这 时 系统 在 稳定 的 流 形 上 能 收缩 ,在 不 稳定 的 流 形 上 可 以 扩张 。 现 考虑 直流 
分 量 为 零 的 情况 ,应 用 上 述 步 又 对 该 系统 进行 分 析 ,可 得 出 下 列 结论 ; 

定理 8.7 ”对 团 8.3 所 示 非 线性 系统 , 若 


暴 (5 十 有 3 二 1) 
吕 十 加 352 十 避 28 十 aa 
FE] = 史 (0A 
则 当 参 数 aiti =1,2,3), 玉 人 =1,2) 同 时 满足 条 件 1 和 条 件 2 时 ， 
条 件 T: 【e+ejd6a 一 吾 说 人 452fa362 一 下 1 【8.39) 
条 件 2:(《1)8 >0, 和 >>a2da3sz2 一 白 1 
[2)6320, 辣 必 82 十 吕 3 盏 2 一 看] 
【3) 百 | 所 人 ,各 雪 一 《@2 十 已 3 古 2 一 吾 1 让 
[4)52<0,A> 一 (aa 二 aa2 一 记 


式 中 ,和 A=w (az+asaz 一 加 一 afasazal)y 制 系统 随 大 变化 会 出 现 混 汪 运 


动 。 
_(52+T35+6.25) 由 
例 8.1 考虑 系统 G(5) = 0 82 1 其 零 所 为 9 1 .5 这 ， 
xz 一 -1.5+ 雪 ,极点 为 SI= -1-j 雪 ,Sa= -1+j3,S3=1.5。 棚 点 分 布 具 有 上 面 
的 四 个 特征 ,系数 ci0i =1,2,3),5 (=12) 满 足 定理 8.7, 故 系统 参数 上 的 变化 
会 出 现 混 沌 运动 。 


8.2.3 混沌 识别 与 混沌 系统 辨识 


人 (5) = 到 >0 


《8 .40) 


1. 未 知 模型 时 混沌 系统 的 识别 


对 于 大 多 数 情 况 , 人 们 并 不 了 解 系统 的 精确 数学 模型 ,甚至 连 系统 的 阶 次 也 不 
知道 ,只 能 得 到 一 组 输入 输出 数据 , 即 系 统 某 些 状态 的 时 间 序 列 。 而 且 这 种 末 知 结 
构 系 统 往往 具有 不 可 测量 的 咯 声 。 这 就 是 第 1 章 所 述 的 "黑箱 "辨识 问题 , 即 具有 
不 可 测 输 和 激励 的 未 知 结构 的 动力 系统 。 对 这 种 “黑箱 "系统 ,首先 必须 解决 的 是 
如 何 区 分 混沌 与 唆 声 , 即 对 混沌 姿态 进行 识别 。 

对 于 时 间 序 列 中 的 噪声 ,一 般 来 说 分 为 两 种 ,动力 学 噪声 和 观测 噪声 ,这 两 种 
噪声 对 系统 的 分 析 都 有 重大 的 影响 。 使 用 计算 得 到 的 关联 维 数 可 以 区 分 混沌 与 吧 
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声 。 对 于 混沌 运动 , 随 着 徐 人 维 数 4 的 增 大 ,关联 p 
维 数 只 将 收敛 于 某 一 确定 值 ; 而 对 于 噪声 ,关联 维 
数 将 随 着 戏 人 维 数 的 增 大 而 增 大 ,如 图 8.4 晓 人 维 
数 < 与 关联 维 数 站 的 关系 。 但 有 时 用 关联 维 数 来 








分 析 系 统 的 混沌 非 线 性 性 质 是 失效 的 。 O 

对 于 未 知 模型 混沌 系统 的 具体 识 蓝 方 法 主要 图 8.4 能 人 维 数 与 
有 三 种 :序列 的 可 预测 性 方法 , 非 线 性 预报 方法 和 关联 维 数 的 关系 
蔡 代 数据 法 。 


1) 序列 的 可 预测 性 方法 
由 于 混沌 是 “无 序 中 的 有 序 ”, 漫 沌 时 间 序 列 是 短期 可 预测 而 长 期 不 可 预测 的 ， 
曲 声 是 不 可 预测 的 , 故 由 序列 的 可 预测 特性 来 区 分 混沌 与 噬 声 。 对 于 一 个 时 间 序 
列 来 说 ,首先 我 们 要 进行 相对 空间 重 构 ,在 此 基础 上 分 析 序 列 的 可 预测 特性 ,有 具体 
由 原始 序列 和 预测 序列 的 相关 系数 
[zs -lfa(o)- 字 ] 
# 一 -一 ”一 一 【8 ,41) 


风 Tz(n) 一 站 豆 】] > [az) 一 全] 


来 度量 。 式 中 ,zfa) ,至 (7) 分 别 为 序列 的 实际 值 和 预测 值 : 工 ,过 分 别 为 相应 的 均 
值 ; 为 预测 总 的 点 数 。 徐 人 维 数 和 蔬 测 步 数 都 对 > 有 影响 。 

改变 圣人 维 数 4 对 序列 作 单 步 预测 时 ,对 于 混沌 时 间 序 列 而 言 , 开 始 阶段 
达到 最 大 值 。 随 后 , > 随 衣 人 维 数 的 增加 而 减少 。 对 于 噪声 时 间 序 列 而 言 ,> 几乎 
不 随 嵌 人 维 数 改 变 。 

取 > 最 大 时 的 能 人 维 数 d 值 对 序列 作 多 步 预测 。 对 于 混沌 序列 而 言 ,> 随 预 
测 步 数 的 增加 而 急剧 下 降 ; 而 随机 虐 声 序列 则 几乎 为 零 ,不 改变 。 

2) 非 线 性 预报 方法 

1990 年 ,Sufihara 和 May 提出 了 一 种 具有 动态 分 析 实 验 数 据 特点 的 非 线 性 预 
报 方法 。 其 基本 种 想 是 混 汪 运动 虽然 对 初 值 敏 感 ,长 期 不 可 预测 ,但 由 于 它 又 有 共有 
确定 性 运动 的 特征 ,短期 可 以 预测 ,这样 就 可 以 较 好 地 区 分 混乱 和 噪声 。 

依据 非 线性 预报 法 的 原理 ,下 面 给 出 这 种 用 于 区 分 混沌 与 只 声 方法 的 实现 算 
法 。 

算法 8.,1 非 线性 预报 方法 

加 先 将 序列 jia) 分 为 两 半 ,前 一 半 只 之 个 数 用 作 预 报 ,后 一 半数 则 用 于 比 
较 预 报 与 实际 序列 值 的 差别 。 

个 取 4Az( 人 二) 一 区 (二 1 一 区 (有 放下 三 1 2 
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二 选 定 嵌 和 人 维 数 d 和 时 间 延 迟 r, 并 形成 4 个 数 的 数列 (auf&),Aa(E+Tr)， 
PrAxzt 人 (Tri), 它 表示 民 维 空间 的 一 个 点 荆 ( 开 )。 

二 在 xf(8) 所 有 的 邻 点 中 ,按照 与 x(&) 臣 离 最 小 的 原则 , 选 出 g+1 个 了 过 维 
的 邻 点 汉 fi, 构成 包含 (RE) 点 的 最 小 单纯 形 。 

包 通过 上 面 的 邻 点 xi=1, 2 了 +1 和 时 间 世 = 基 (pp 为 预报 的 步 
数 ) 后 的 演化 点 友 ( 人 ,以 各 邻 点 与 其 步 预测 后 的 点 xf(i) 王 离 的 指数 作为 权重 ， 
按 下 式 确 汗 


= 汪 2exp[- lz xD]ae [8.42) 


以 xf(&) 点 声 步 后 的 实际 值 为 横 沧 标 , x(&) 点 户 步 后 的 预报 值 巡 ( 丰 ) 为 纵 
坐标 ,作对 应 的 坐标 图 。 如 果 点 事 集 在 两 坐标 的 对 角 线 附近 , 则 表示 预报 准确 ,时 
闻 序 列 可 以 预测 , 央 此 序列 是 混沌 的 ,否则 ,说 明 该 序 斌 是 随机 序列 。 

3) 替代 数据 法 

Oshorme 和 Theiler 等 基于 随机 系统 中 零 假设 的 概念 , 握 出 了 一 种 利用 替代 数 
据 , 即 直接 电 原 始 时 间 序 列 产生 随机 数据 的 统计 量 , 来 判定 该 序列 非 线性 的 特性 的 
方法 。 这 种 方法 是 目前 区 分 混沌 与 嘻 声 的 比较 好 的 方法 ,在 实际 对 象 中 非常 实用 。 

替代 数据 法 是 一 种 统计 检验 方法 , 它 的 基本 思想 是 假设 所 研究 的 时 间 序 列 为 
具有 某 种 特性 的 非 线性 随机 过 程 ,如 非 线 性 高 斯 过 程 ,然后 用 特定 的 方法 对 原始 数 
据 进行 随机 化 ,并 根据 原 假设 保留 数据 的 某 些 非 线 性 特性 ,如 均值 .方差 .频谱 等 ， 
这 就 是 所 谓 的 替代 数据 。 随 后 对 原始 数据 和 替代 数据 分 别 计算 某 些 检验 参量 ,再 
用 数理 统计 方法 来 确定 两 者 之 间 是 否 有 显著 差异 。 如 果 有 , 则 假设 不 成 立 ,说 明 研 
究 对 象 不 是 所 假设 的 非 线 性 随机 系统 。 

为 了 检验 原始 数据 和 着 代数 据 是 否 存在 显著 差异 ,需要 计算 某 些 非 线性 特性 
的 统计 参量 。 目 前 常用 的 检验 参量 有 关联 维 数 、 李 雅 普 诺 夫 、 非 线性 预测 误差 .局 
部 流 等 方法 。 

蔡 代 数据 法 一 般 的 研究 步 又 为 

人 @ 需要 确定 原 息 设 妞 , 一 般 假 设 原 序列 为 一 非 线 姓 随机 过 程 ; 

加 对 原 序列 随机 化 ,产生 所 需要 的 蔡 找 数据 ,并 使 蔡 代 数据 保留 原 序列 在 原 
很 设 " 下 的 非 线性 特性 ; 

@@ 网 择 非 线性 检验 参量 ; 

由 分 别 计算 原 始 数据 和 替代 数据 的 检验 参量 ,并 用 数理 统计 方法 来 确定 原 假 
设 百 , 是 否 成 立 。 

目前 常用 的 蔡 代 数据 法 有 三 种 :随机 化 相位 昔 代 数据 、 混 序 傅 里 叶 变 换 蔡 代 数 
据 和 高 斯 标 度 蔡 代数 据 。 随 机 化 相位 替代 数据 对 原 序列 相位 加 入 具有 某 种 特性 的 
均匀 分 布 的 随机 变量 ; 混 序 傅 里 叶 变 换 替 代 则 对 随机 化 行为 替代 数据 保持 幅 值 不 
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变 , 而 重新 进行 升序 或 降序 排列 处 理 ; 而 高 斯 标 度 替代 数据 则 对 原 序列 相位 加 人 高 
斯 分 布 的 随机 序列 ,再 产生 随机 化 相位 高 斯 过 程 ( 有 和 色 噪 声 )。 依 据 随 机 化 相位 蔡 
代数 据 法 的 原理 ,下 面 给 出 这 种 用 于 区 分 混沌 与 噪声 方 读 的 实现 算法 。 
设 1a(RIR=1T1 2 为 从 试验 中 获得 的 一 组 反 瑞 系统 状态 的 时 霹 序 列 。 
算法 8$.2 替代 数据 法 
全 对 时 间 序 列 
玉 ( 天 一 到 (天 =0,1.2 ,NMN-1 
作 傅 里 叶 变换 
上 
= 守 > 了 《二 [8.43) 
或 
Co) 一 同 (oem 站 三 0D 土 Aw yy 土 必 Amw， ao 【8.44) 
人 对 频率 变换 Ce) 增加 一 个 均 刁 分 布 在 区 间 人 0,2r) 的 随机 量 锡 (ow) ,并 使 
王 fo) = 8 一 属 ), 则 有 





(wj = (o@) eiletoe)+rEtw)] 《名 .4 
电 对 Le) 进行 全 里 时 反 变换 , 即 可 得 蔡 代 时 间 序 列 
2 一 六 之 [fo 忆 -E2nizeiN [ 台 .46 
二 进行 显著 性 检验 
|Qo - zx 
1 一 [8.47] 


式 中 , Qe 为 原始 序列 的 一 个 判别 统计 量 ,xwH 和 ci 分 别 是 蔡 代 数据 对 应 的 统计 莉 
Qno 的 均值 和 方差 。 

多 判别 :如 果 步 骤 @@ 中 的 了 大 , 则 表示 蔡 代 数据 和 原始 数据 有 显著 差异 , 即 说 
明 有 非 线性 序列 存在 , 竺 则 ,说 明 该 时 间 序 列 是 赂 声 。 


2. 混沌 系统 的 办 识 


混沌 的 辨识 是 指 确定 一 个 混沌 系统 的 数学 模型 .包括 结构 辩 识 和 参数 辨识 两 
部 分 。 为 了 能 从 时 浊 序 列 中 得 到 动力 系统 相 空 间 的 几何 机 构 ,Packard 等 人 做 了 创 
造 性 工作 ,他 们 把 一 维 时 间 序 列 骨 人 到 辽 维 空间 中 ,有 某 用 时 间 延 迟 技术 重 构 相 空 
间 ,Takens 和 Mane 证 明了 只 要 4 >2D+1, 其 中 呈 为 吸引 子 的 分 维 数 。 则 瞻 射 

到 :R" 一 R” ,R” 为 相 空间 ,RY 为 散人 空间 
是 在 吸引 子 附 近 的 光滑 、 一 对 一 映射 , 从 而 嵌 人 空间 中 吸引 子 的 几何 特性 与 原动力 
系统 中 的 几何 特性 等 价 。 在 1985 年 ,Eekman 等 人 证 明了 只 要 dd > 也, 能 人 空间 中 
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点 集 的 维 数 就 等 价 于 咀 引 子 的 维 数 ,从 而 解决 了 相 空间 重 构 理 论 中 的 一 个 重要 问 
题 。 理 论 上 讲 对 于 具有 无 穷 精 彦 的 无 限 长 时 间 序 列 ,延迟 参数 r 的 选取 是 可 以 任 
意 的 ,34 只 需要 大 于 刀 。 而 在 实际 应 用 中 ,(Z& -1)z 中 民 和 z 的 选取 十 分 重要 。 若 
z 杰 小 , 拔 人 空间 中 相 点 和 拓 量 各 分 重 的 元 余 度 增 大 ;大 大 会 造成 分 维 估 计 值 偏 大 ， 
虽 使 相 点 矢量 各 分 量 近 似 相 等 ,在 由 空间 中 豚 引 分 子 就 会 为 -- 条 对 和 直 线 。 
Broomhed 和 King 提出 了 一 种 主 分 量 分 析 法 , 即 先 选 定 4 -1 值 ,增加 zz 的 同时 ， 
减少 ,但 保持 (dg -~ H)r 不 变 。 另 外 还 可 用 线性 不 相关 时 间 .交互 信息 时 间 和 拓扑 
原则 来 重 枸 相 空间 。 相 空间 重 攀 的 方法 比较 成 熟 ,但 只 是 在 某 种 意义 下 等 价 重 构 
旦 了 原 系 统一 些 重 要 的 动力 学 特性 ,并非 与 原 系统 完全 等 价 。 

至 于 对 于 混沌 系统 如 何 获得 其 精确 的 数学 模型 ,进行 具体 的 参数 辨识 ,是 … 个 
有 待 于 深 人 研究 的 问题 ,目前 报道 这 方 而 的 文献 很 少 。Qammer,Aruirre 等 在 这 方 
面 合 了 一 定 的 工作 。 他 们 所 得 到 的 辨识 方法 和 传统 的 控制 理论 中 的 辩 识 不 同 ,但 
由 于 这 些 方法 计算 量 大 ,很 难 用 于 在 线 控制 。Liung 阅 明 可 以 用 传统 控制 理论 中 
的 辨识 方法 如 最 小 二 乘法 、 递 推 最 小 方差 法 来 确定 混沌 系统 的 模型 。 采 用 这 种 方 
法 一 般 需 先 选 择 一 类 模型 ,然后 对 这 类 模型 利用 模型 检验 和 代价 最 小 的 方法 进行 
通 当 选择 ,不 具有 普遍 性 。 





8.3 小 缚 


本 章 介绍 了 复杂 非 线性 动态 系统 辨识 的 两 种 方法 。 一 种 是 Voltetta 级 数 的 表 
示 太 其 辨识 方法 , 先 找 到 Volterra 级 数 和 广义 频率 响应 (generalized frequency te- 
sbonse function, GFRF) 的 对 应 关系 ,然后 用 非 线性 系统 的 GFRF 递 推算 法 求 
Volterra 的 内 核 上 Cr), 即 系统 的 脉冲 响应 ; 另 一 种 是 复杂 系统 的 混沌 现象 及 其 辩 
识 , 讨 论 了 三 种 对 于 未 知 模型 混沌 系统 的 具体 识别 方法 : 即 序列 的 可 预测 性 方法 、 
非 线性 预报 方法 和 替代 数据 法 ;只 有 能 识别 混沌 ,才能 进而 控制 混 淖 或 诱导 混沌 。 
至 于 对 混沌 系统 如 何 获得 其 精确 的 数学 模型 ,进行 具体 的 参数 辩 识 ,是 一 个 有 竺 于 
深 人 研究 的 问题 。 


习 题 


 . 试用 Volterra 级 数 来 描述 二 阶 非 线性 系统 的 脉冲 响应 。 
2, 如 何 区 分 混 坏 和 虽 声 ? 

3, 对 于 未 知 模型 混沌 系统 的 具体 识别 方法 有 哪 几 种 ? 

4. 抑制 混沌 和 诱导 混沌 的 实质 是 什么 ? 
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